Observé chez
Développeur Spark/Scala Data Platform
Transports
Informatique
Île-de-France
SparkScalaPySparkDatabricksGitLab CI/CDAWSPower BIJira
Rôle
Développe des pipelines Spark/Scala et PySpark pour alimenter des tableaux de bord Power BI orchestre les workflows Databricks et assure le support de niveau 3 sur des plateformes critiques dans une équipe agile.
Technologies
SparkScalaPySparkDatabricksGitLab CI/CDAWSPower BIJira
Contextes
Transports
Compétences
Développement de pipelines batchOrchestration de workflowsDéploiement CI/CDSupport RUN/MCO/TMA
Challenges détectés
3 enjeuxLes principaux enjeux identifiés chez RATP Smart Systems, avec les technologies et compétences associées.
- 01Optimisation
Construire des pipelines batch Spark/Scala et PySpark pour l'alimentation de dashboards Power BI
Technologies clés
SparkScalaPySparkPower BICompétences clés
Développement de pipelines batch - 02Optimisation
Orchestrer et déployer des workflows Databricks via GitLab CI/CD
Technologies clés
DatabricksGitLab CI/CDCompétences clés
Orchestration de workflowsDéploiement CI/CD - 03Optimisation
Assurer le support de niveau 3 et le RUN/MCO/TMA sur des plateformes critiques
Compétences clés
Support RUN/MCO/TMA



