captureapplication.fairspec.org
Fairspec — framework de données en TypeScript et Python
Une spécification pour décrire des jeux de données tabulaires, avec des implémentations de référence en TypeScript et en Python.
nous l'écrivons
Au-delà de la livraison
Plateformes de données et pipelines
Faire entrer les données, les vérifier et les garder correctes — de quelques tableurs à des millions de lignes par jour.
à partir dedatist · pricing
5 000 €
prix fixe à partir de
2 semaines
livraison à partir de
Les deux convenus par écrit avant que quiconque commence
Ce que c'est
Tout ce qui se passe entre l'arrivée des données et des données auxquelles vous pouvez vous fier : les collecter, leur donner une forme, les vérifier contre cette forme et les garder correctes à mesure qu'elles changent — qu'elles viennent de quelques tableurs ou de quelques millions de lignes par jour.
Ce que vous obtenez
Des pipelines qui échouent bruyamment au lieu d'écrire discrètement quelque chose de faux. Un schéma écrit contre lequel vos données sont vérifiées à chaque exécution : un mauvais fichier est arrêté à la porte plutôt que par la personne qui le consomme un mois plus tard. Et des formats qui nous survivront — ouverts, documentés et lisibles sans notre logiciel.
Comment nous le construisons
Un traitement en colonnes, si bien que le coût d'un million de lignes est plus proche du coût de mille que vous ne l'imagineriez, et un schéma qui voyage avec les données au lieu de vivre dans un document à côté. C'est notre plus ancien domaine de travail : nous écrivons le format d'échange Fairspec, nous avons réalisé l'implémentation TypeScript du standard Data Package grâce à une bourse NLnet, et le framework Python qui le porte est téléchargé environ 700 000 fois par mois.
Où nous l'avons construit
capturemycarro.app
Mycarro — place de marché auto et CRM concessionnaires
Une place de marché de voitures d'occasion en ligne au Portugal. Une recherche grand public sur des annonces collectées dans tout le marché, un back-office concessionnaires pour les leads, le stock et la facturation, et une application mobile — construits de bout en bout.
nous l'avons construit
Ce sur quoi nous le construisons
Des dataframes en colonnes plutôt que des scripts bricolés : un million de lignes coûte ce que coûtent mille.
Des schémas qui voyagent avec les données, et un seul contrat de validation de la base au navigateur.
Un Postgres par produit, avec le schéma et les requêtes délibérément tenus par des outils différents.
Des crawls respectueux et reprenables, qui échouent bruyamment au lieu de se vider en silence.
Nous contacter
Dites-nous ce que vous voulez faire construire.
Nous sommes une petite équipe au Portugal, aux horaires de Londres. Un site, une application, un outil interne, ou la plateforme derrière — commencez par une phrase sur le problème et nous prenons la suite.