Airflow

Autre

Cas client Murata : Industrialisation data et ...

Murata, un fabricant japonais, collabore avec Codéin pour industrialiser ses pipelines de données en utilisant Airflow et dbt. L'objectif est de garantir la fiabilité et la qualité des traitements de données tout en assurant une architecture locale évolutive. Le projet inclut la structuration des flux de données, des tests de montée en charge des outils et la standardisation de la restitution des données via Superset. Cela vise à soutenir la croissance de l'entreprise et à améliorer la prise de décision opérationnelle.

Autre

Replay – Industrialiser les projets Data avec ...

La conférence "Data as Code" a présenté des méthodes pour industrialiser les projets data, inspirées des pratiques DevOps. Romain Bonnal a souligné les problèmes courants des outils no-code/low-code et a présenté des solutions comme le versionning avec Git, l'automatisation des déploiements, et l'intégration de tests pour assurer la qualité. Cette approche permet de rendre la gestion des projets data plus rigoureuse et fiable, transformant ainsi le processus de développement en quelque chose de plus collaboratif et traçable.