Mediatech est un projet public qui traite des données administratives ouvertes pour les rendre accessibles et exploitables par des applications d'intelligence artificielle. Il automatise le téléchargement, le traitement, la vectorisation et l'insertion de ces données dans une base de données PostgreSQL avec PgVector, facilitant ainsi leur utilisation par les acteurs publics et les développeurs.

Ce projet est une plateforme d'analyse de données hébergée sur Google Cloud Platform. Il permet de collecter, traiter, et analyser des données à grande échelle grâce à des outils tels que BigQuery, Airflow, et TensorFlow.

Ce projet fournit une infrastructure clé en main pour déployer une instance d'Airflow, facilitant ainsi l'orchestration de workflows de données. Il permet aux utilisateurs de tester leurs DAGs dans un environnement isolé avant leur mise en production. Basé sur Docker, il simplifie la configuration et le lancement des services nécessaires à l'exécution des pipelines de données.

Ce projet utilise Airflow pour orchestrer des workflows de traitement de données dédiés à l'application Trackdéchets, qui assure le suivi et la gestion des déchets dangereux en France. Il permet de gérer les différents acteurs de la filière déchet, d'assurer la traçabilité des déchets et de veiller au respect de la réglementation en vigueur.

Ce projet héberge des scripts d'automatisation pour schema.data.gouv.fr, développés en tant que DAG Airflow. Ils permettent de générer la documentation liée aux schémas, de vérifier la cohérence des ressources avec un schéma et de générer des recommandations pour des jeux de données sur data.gouv.fr.

Ce projet gère l'intégralité des flux de données intervenant pour le Pilotage de l'Inclusion. Il regroupe les scripts SQL et Python utilisés par les data analysts, ainsi que les DAGs Airflow et modèles DBT maintenus par l'équipe.

DAG Airflow permettant de récupérer les données INPI du jour précédent et de les traiter pour générer deux fichiers csv. Ces données sont ensuite sauvegardées sur une instance Minio et ont vocation à alimenter l'annuaire des entreprises.

Le projet rbh-sync permet la synchronisation et l'intégration de données entre différentes applications et systèmes, offrant une automatisation robuste des workflows de données et une interaction transparente entre des environnements hétérogènes.

La plateforme de données Trackdéchets est une solution permettant de gérer et d'intégrer des données relatives aux déchets. Elle utilise Airflow pour l'orchestration de workflows et Meltano pour l'extraction, la transformation et le chargement (ETL) de données. Les données sont stockées dans une base PostgreSQL et accessibles via une interface web.

Le projet azfp_data_processing est dédié au traitement et à l'analyse de données financières et économiques. Il permet de gérer des workflows de données complexes, d'assurer leur traçabilité et de générer des rapports détaillés.