Tekos

Observé chez

Data Engineer DataWarehouse

Luxe

Informatique

IT
AzureDatabricksSparkScalaAzure Data FactoryAzure DevOpsSSMSDelta

Rôle

Ingénieur données responsable du développement des pipelines ETL et de l'alimentation du DataWarehouse pour moderniser la solution RH centralisée.

Technologies

AzureDatabricksSparkScalaAzure Data FactoryAzure DevOpsSSMSDelta

Contextes

Luxe

Compétences

Développement ETLModélisation donnéesGestion d'historisationDéveloppement Spark/ScalaOrdonnancement data pipelinesMapping données

Challenges détectés

3 enjeux
  1. Transformation

    Développer un outil RH moderne remplaçant une solution obsolète

    Technologies clés

    AzureDatabricksAzure Data Factory

    Compétences clés

    Développement ETLModélisation données
  2. Optimisation

    Implémenter les pipelines de données et l'ordonnancement ETL

    Technologies clés

    Azure Data FactorySparkScala

    Compétences clés

    Développement Spark/ScalaOrdonnancement data pipelines
  3. Optimisation

    Gérer l'historisation des données avec Delta

    Technologies clés

    DeltaDatabricks

    Compétences clés

    Gestion d'historisation

Profils proches