Data Engineer Senior Data Platform Santé

Santé

Informatique

SQL ServerClickHouseElasticsearchApache AirflowPythonSQLTypeScriptNode.jsDockerKubernetesGitLabGitJiraConfluence

Rôle

Pilier technique de la Data Platform de GERS Data responsable de la conception du développement et de l’optimisation de pipelines et d’entrepôts de données à grande échelle pour le secteur pharmaceutique.

Technologies

SQL ServerClickHouseElasticsearchApache AirflowPythonSQLTypeScriptNode.jsDockerKubernetesGitLabGitJiraConfluence

Entités

Data EngineeringDéveloppementProductUX/UIR&D

Contextes

SantéDonnées pharmaceutiques

Compétences

Optimisation de requêtes SQLDéveloppement de pipelines de donnéesOrchestration de flux de donnéesModélisation DWH et datamartConteneurisationCI/CDRigueurAutonomieCommunication

Challenges détectés

4 enjeux

Transformation
Modernisation de la Data Platform cloud-native
Technologies clés
ClickHouseSQL ServerElasticsearchDocker
Compétences clés
Optimisation de requêtes SQLDéveloppement de pipelines de donnéesModélisation DWH et datamart
Optimisation
Concevoir et maintenir des pipelines de données robustes et scalables
Technologies clés
PythonSQLApache Airflow
Compétences clés
Développement de pipelines de donnéesOrchestration de flux de données
Conformité
Garantir la qualité et la fiabilité des données
Compétences clés
RigueurQualité de la donnée
Transformation
Migration des entrepôts de données vers de nouvelles technologies
Technologies clés
ElasticsearchClickHouseSQL Servercloud