Observé chez

Senior Data Engineer

Technologie

Informatique

Paris

SnowflakeDatabricksAirflowAirbyteAWSS3IAMTerraform

Rôle

Architecte données et ingénieur plateforme données en libre service (DPaaS)

Technologies

SnowflakeDatabricksAirflowAirbyteAWSS3IAMTerraform

Entités

Core Data TeamDataops Team

Contextes

Plateforme de réservation de restaurantsTechnologie

Compétences

Conception de pipelines ELT scalablesModélisation analytique (medallion architecture)Optimisation de performance et coûts cloudGestion de la qualité des données et data contractsOrchestration Airflow avancéeInfrastructure as CodeCI/CD pour workflows donnéesObservabilité et monitoringGouvernance des donnéesMentoring technique

Challenges détectés

5 enjeux

Les principaux enjeux identifiés chez TheFork, avec les technologies et compétences associées.

01Transformation
Transformer les capacités données via une plateforme moderne en libre-service (DPaaS)
02Transformation
Passer d'un modèle BI centralisé à un écosystème données fédéré et orienté domaine
03Optimisation
Optimiser la performance et les coûts des entrepôts de données cloud
04Conformité
Implémenter et appliquer des standards de gouvernance et de qualité des données
05Optimisation
Améliorer la scalabilité et la fiabilité des patterns d'orchestration Airflow