Piattaforme dati e pipeline
Far entrare i dati, verificarli e mantenerli corretti — da qualche foglio di calcolo a milioni di righe al giorno.
Elaborazione dati · Standard dati e validazione · Database transazionali · Acquisizione dati dal web
Dati e archiviazione
Acquisizione dati dal web
Crawl educati e riprendibili, che falliscono in modo rumoroso invece di svuotarsi in silenzio.
- Crawlee
- Playwright
- Cheerio
- Firecrawl
Che cos'è
Raccogliere dati da siti e servizi che non offrono un'API utilizzabile — a intervalli regolari, su volumi importanti e senza far bloccare il cliente.
Perché l'abbiamo scelto
Crawlee si occupa delle parti noiose da fare bene: code di richieste, ritentativi, rotazione dei proxy, limiti di concorrenza e rate limiting educato. Usiamo Cheerio quando il markup arriva già completo e Playwright solo quando una pagina ha davvero bisogno di un browser, perché un browser headless per pagina è la differenza tra un crawl che costa centesimi e uno che costa centinaia di euro. La regola a cui teniamo è che un crawler deve fallire rumorosamente: un selettore che smette di corrispondere solleva un errore invece di scrivere un risultato vuoto sopra dati buoni.
Che cosa ci costruiamo
Dove lo usiamo
Dietro i prodotti di marketplace e ricerca, dove l'inventario va assemblato da molte fonti prima di poter essere normalizzato in un catalogo unico.
schermatamycarro.app
Mycarro — marketplace auto e CRM per rivenditori
Un marketplace di auto usate attivo in Portogallo. Ricerca per il consumatore su annunci raccolti da tutto il mercato, un back office per i rivenditori con contatti, magazzino e fatturazione, e un'app mobile — costruito end-to-end.
l'abbiamo costruito
Contattateci
Raccontateci che cosa volete costruire.
Siamo un piccolo team in Portogallo, con orario di Londra. Un sito, un'app, uno strumento interno o la piattaforma che ci sta dietro — iniziate con una frase sul problema e poi ci pensiamo noi.