Observé chez
Data Engineer IA et Big Data
Finance
Informatique
France
Apache SparkPySparkDatabricksAzureLLMRAGVector SearchFine-tuning
AzureRôle
Data Engineer responsable de la maîtrise de la donnée et de l'infrastructure data assurant la qualité la normalisation et la qualification des données pour faciliter leur exploitation par les équipes métier et data science avec expertise en IA et Machine Learning.
Technologies
Apache SparkPySparkDatabricksAzureLLMRAGVector SearchFine-tuning
Entités
Équipe Data ScienceÉquipe ITÉquipe Metier
Contextes
Paiement et financementCommerce digitalBanque
Compétences
Gestion infrastructure dataCollecte et stockage de donnéesTraitement et analyse de volumes importantsModélisation et normalisation de donnéesQualification de donnéesOptimisation d'algorithmesGestion de backlog techniqueDéfinition et mise en œuvre de roadmapVeille technologiqueFormation et montée en compétencePréparation de donnéesFeature EngineeringLLM EngineeringPrompt EngineeringCloud computing
Challenges détectés
5 enjeux- Optimisation
Assurer la maîtrise de la donnée et la qualité de son utilisation
- Optimisation
Faciliter l'exploitation des données par les équipes
- Transformation
Intégrer des systèmes d'intelligence artificielle à l'architecture data
- Optimisation
Gérer et optimiser l'infrastructure data en relation avec les prestataires
- Conformité
Assurer la conformité aux normes et réglementations