Observé chez
Data Engineer Infrastructure Cloud
Défense
Informatique
Paris
PythonPostgreSQLGCPPrefectAirflowDagsterCloud RunCompute EngineCloud SQLGCS
Python
PostgreSQL
GCP
AirflowRôle
Conception et exploitation de pipelines données batch et temps réel sur GCP pour systèmes de défense aérienne.
Technologies
PythonPostgreSQLGCPPrefectAirflowDagsterCloud RunCompute EngineCloud SQLGCS
Entités
Software
Contextes
DéfenseAérospatiale
Compétences
Conception de pipelines donnéesOrchestration de workflowsModélisation de données PostgreSQLDéploiement et exploitation GCPMonitoring et optimisation de workflowsGestion de données volumineuses (images, vidéos, logs)Intégration MLOpsSécurité et gouvernance données
Challenges détectés
3 enjeux- Optimisation
Fiabilité et scalabilité des pipelines en production
- Conformité
Conformité aux contraintes de défense et sécurité
- Optimisation
Intégration données-ML dans environnements contraints