Lead Data Engineer Cloud Data Platform

Énergie

Informatique

Paris, Hybride

Google Cloud PlatformBigQueryDataformDataplexBigLakeVertex AICloud StorageCloud ComposerCloud WorkflowsCloud RunCloud FunctionsIAMCloud MonitoringDataflowPythonSQLTerraformGit

Rôle

Lead Data Engineer responsable de la conception du développement et de l'évolution de la Data Platform cloud native sur Google Cloud Platform avec un rôle de leadership technique de coaching d'équipe et de contribution à l'innovation data et IA pour soutenir les opérations et l'analytique métier d'EPEX SPOT.

Technologies

Google Cloud PlatformBigQueryDataformDataplexBigLakeVertex AICloud StorageCloud ComposerCloud WorkflowsCloud RunCloud FunctionsIAMCloud MonitoringDataflowPythonSQLTerraformGit

Entités

Data Platform Team

Contextes

Marché de l'électricitéTrading d'énergieInnovation dataTransition énergétique

Compétences

Conception de pipelines de donnéesDéveloppement de solutions batch et streamingData governanceData quality managementGestion de la sécurité et conformitéCoaching techniqueMentoratRevue de codeGestion de la performance et des coûtsInfrastructure as CodeCI/CDDevOpsDataOpsCollaboration AgileCommunicationLeadership technique

Challenges détectés

5 enjeux

Les principaux enjeux identifiés chez EPEX SPOT, avec les technologies et compétences associées.

01Croissance
Développer et opérer une Data Platform cloud-native évolutive et fiable
Technologies clés
Google Cloud PlatformBigQueryDataformDataplex
Compétences clés
Conception de pipelines de donnéesDéveloppement de solutions batch et streamingGestion de la performance et des coûts
02Conformité
Mettre en œuvre la gouvernance et la qualité des données
Technologies clés
Dataplex
Compétences clés
Data governanceData quality managementGestion de la sécurité et conformité
03Transformation
Accompagner l'adoption de l'IA et de l'analytique avancée
Technologies clés
Vertex AI
Compétences clés
Collaboration avec Data Scientists
04Recrutement
Coacher et faire monter en compétence l'équipe Data Engineering
Compétences clés
Coaching techniqueMentoratRevue de code
05Optimisation
Favoriser la collaboration Agile et l'alignement plateforme
Compétences clés
Collaboration AgileDevOpsDataOps