Ingénieur Data Plateforme Fintech

Finance

Informatique

Paris, Hybride

AzureDatabricksApache SparkDelta LakeAirflowdbtPythonSQLGit

Rôle

Ingénieur data chargé d'opérer fiabiliser et structurer la plateforme data d'une fintech IA en intervenant sur l'ensemble de la chaîne de traitement des données et en contribuant à l'évolution de l'architecture.

Technologies

AzureDatabricksApache SparkDelta LakeAirflowdbtPythonSQLGit

Entités

Équipe Data

Contextes

FintechFinancement de startups et PMEDonnées financières et bancaires

Compétences

Opération de pipelines de donnéesGestion d'incidents dataDéveloppement de flux d'ingestionCréation de dashboards et reportingContrôle qualité des donnéesDocumentation techniqueOptimisation de traitements et coûts cloudCollaboration pluridisciplinaireUtilisation d'assistants IARigueurAutonomie

Challenges détectés

5 enjeux

Optimisation
Assurer la fiabilité et le run des pipelines de données
Technologies clés
Airflow
Compétences clés
Opération de pipelines de donnéesGestion d'incidents data
Croissance
Développer de nouveaux flux d'ingestion et connecteurs
Technologies clés
PythonSQL
Compétences clés
Développement de flux d'ingestion
Optimisation
Optimiser la performance et les coûts de la plateforme data
Technologies clés
DatabricksAzure
Compétences clés
Optimisation de traitements et coûts cloud
Conformité
Garantir la qualité et la surveillance des données
Compétences clés
Contrôle qualité des données
Optimisation
Structurer la gouvernance data (documentation, runbooks, conventions)
Compétences clés
Documentation technique