Description du projet
TraduitNous sommes une entreprise de taille moyenne et au fil des ans, nous avons accumulé de nombreuses bases de données, des schémas dans notre entrepôt de données, des exports dans des feuilles de calcul et des rapports BI, mais personne n'a une vue d'ensemble complète de ce qui existe et où cela se trouve. Les analystes passent des jours à chercher la bonne table, demandent à des collègues dans des discussions et reconstruisent des métriques qui ont déjà été calculées quelque part. Lorsque deux rapports ne s'accordent pas sur les chiffres, nous ne pouvons pas rapidement déterminer quelle source est correcte et qui en est le propriétaire. Nous voulons résoudre cela avec un catalogue de données approprié : un registre unique consultable d'ensembles de données, de tables, de colonnes et de rapports, où chacun a une description claire, une signification commerciale, un propriétaire et un indicateur de fraîcheur.
Au-delà de la recherche, nous avons besoin de lignée — la capacité de voir d'où vient un champ, quels pipelines alimentent une table et quels tableaux de bord seront cassés si nous le changeons. Il est également important que les indicateurs de qualité des données soient visibles directement dans le catalogue : une personne comprend immédiatement s'il s'agit d'un ensemble de confiance, obsolète ou en cours de révision. L'objectif principal est la confiance : un analyste ouvre le catalogue, trouve l'ensemble de données dont il a besoin en quelques secondes, comprend sa signification, voit qui contacter et sait déjà s'il peut se fier aux chiffres avant de construire quoi que ce soit dessus.
Nous sommes prêts à envisager une solution open-source ou légère adaptée au lieu d'une plateforme d'entreprise lourde si cela correspond à notre pile et peut être maintenu par une petite équipe. Nous vous demandons de proposer une approche et des délais approximatifs.
Ce que nous attendons du travail :
— Inventaire et collecte automatique de métadonnées à partir de sources ;
— Recherche avec descriptions, propriétaires et étiquettes ;
— Visualisation de la lignée au niveau des tables et des colonnes ;
— Indicateurs de qualité des données et un processus de vérification simple.
Au-delà de la recherche, nous avons besoin de lignée — la capacité de voir d'où vient un champ, quels pipelines alimentent une table et quels tableaux de bord seront cassés si nous le changeons. Il est également important que les indicateurs de qualité des données soient visibles directement dans le catalogue : une personne comprend immédiatement s'il s'agit d'un ensemble de confiance, obsolète ou en cours de révision. L'objectif principal est la confiance : un analyste ouvre le catalogue, trouve l'ensemble de données dont il a besoin en quelques secondes, comprend sa signification, voit qui contacter et sait déjà s'il peut se fier aux chiffres avant de construire quoi que ce soit dessus.
Nous sommes prêts à envisager une solution open-source ou légère adaptée au lieu d'une plateforme d'entreprise lourde si cela correspond à notre pile et peut être maintenu par une petite équipe. Nous vous demandons de proposer une approche et des délais approximatifs.
Ce que nous attendons du travail :
— Inventaire et collecte automatique de métadonnées à partir de sources ;
— Recherche avec descriptions, propriétaires et étiquettes ;
— Visualisation de la lignée au niveau des tables et des colonnes ;
— Indicateurs de qualité des données et un processus de vérification simple.
Autre / Divers Espèces, Virement bancaire
