Observé chez

Architecte Plateforme Données Databricks

Finance

Informatique

Paris

DatabricksPySparkSpark SQLDelta LakeSQL WarehouseAWSAzureCI/CDMLFlow

Rôle

Architecte plateforme données chargé de construire des actifs réutilisables pour le Centre d'Excellence Data Engineering définir les standards et bonnes pratiques Databricks intégrer Databricks avec les services cloud (AWS/Azure) et mettre en place la gouvernance des données la traçabilité et les standards d'audit.

Technologies

DatabricksPySparkSpark SQLDelta LakeSQL WarehouseAWSAzureCI/CDMLFlow

Entités

Centre D'excellence Data Engineering

Contextes

Services financiersBanque

Compétences

Data EngineeringBig Data PlatformLarge-scale data processingData GovernanceData QualityObservabilityFinOps monitoringUnity CatalogData LineageAccess GovernanceAuditing StandardsCloud integrationCross-cultural collaboration

Challenges détectés

3 enjeux

Transformation
Construire une plateforme données moderne pour soutenir la croissance
Conformité
Définir et appliquer les standards de gouvernance des données et d'audit
Optimisation
Intégrer Databricks avec les services cloud AWS/Azure