Observé chez
Data Engineer
Intelligence Artificielle
Informatique
Paris
PythonSQLApache AirflowAWSAmazon S3Amazon EC2DockerPostgreSQLMySQLGitLinux
Rôle
Développement et maintenance de pipelines de données avec Apache Airflow et AWS
Technologies
PythonSQLApache AirflowAWSAmazon S3Amazon EC2DockerPostgreSQLMySQLGitLinux
Entités
Engineering – Tech & AI Enabler
Contextes
Big DataIntelligence ArtificielleCloud Computing
Compétences
Développement de pipelines de donnéesOrchestration avec Apache AirflowTraitement de donnéesETL/ELTTraitement automatique de texteOptimisation des performancesAlgorithmiqueBases de données relationnelles et NoSQLArchitectures Data modernesIntégration de modèles LLM
Challenges détectés
3 enjeux- Optimisation
Optimiser les performances des pipelines et réduire les coûts Cloud
- Transformation
Intégrer des modèles d'IA générative dans les chaînes de traitement
- Conformité
Garantir la fiabilité et la qualité des traitements de données



