California Schemin’! How the Schema Registry has Ancestry Basking in Data

Intervenants : Chris Sanders, directeur entrepôt de données et visualisation et Max Norris, directeur ingénierie des données, Ancestry

De nombreuses entreprises sont confrontées au défi de la collecte de données provenant de sources disparates, organisant ces données dans une base de connaissances et servant ces informations de façon pertinente à leurs clients. Avec plus de 19 milliards d'archives historiques numérisées, 80 millions d'arbres généalogiques, 10 milliards de personnes / nœuds d'arborescence et 3 millions de clients ADN, Ancestry dispose d'une mine de données qui aide les gens à avoir une meilleure idée de qui ils sont, d'où ils viennent, et qui d'autre partage leur itinéraire familial.

Bien souvent, les entreprises qui rencontrent des défis de données volumineuses intègrent Apache Kafka dans l'architecture des données ; mais malgré l'intégration réussie de Kafka, traiter des quantités massives de données peut encore être écrasant et débilitant. Comment donner du sens à toutes les données provenant de diverses sources dans votre entrepôt, répondre aux besoins d'une entreprise en pleine croissance et rester compétitif ? Ancestry a abordé ce défi en introduisant le registre de schémas dans le cœur de la structure des données et le processus de développement. Les résultats ont été transformationnels et ont considérablement réduit le temps nécessaire de la définition de la source des données aux rapports et à la production. Avant le registre de schémas, les nouveaux ensembles de données pouvaient prendre des mois à être implémentés et étaient ensuite perdus dans les pétaoctets de données.

Participez à cette session et découvrez comment Ancestry a mis en production de nouveaux ensembles de données, pas juste en quelques mois ou semaines, mais en quelques JOURS, et comment le registre de schémas a transformé notre structure de données.

<< Retour

Nous utilisons des cookies afin de comprendre comment vous utilisez notre site et améliorer votre expérience. Cliquez ici pour en apprendre davantage ou pour modifier vos paramètres de cookies. En poursuivant la navigation, vous consentez à ce que nous utilisions des cookies.