Observé chez

Senior Engineering Manager AI Validation

Automobile

Informatique

Sunnyvale

Management

PythonLinuxPyTestPlaywrightBehaveJenkinsJIRALangGraphRAGASVector databases

Rôle

Senior Engineering Manager responsible for building and leading Sonatus's AI Validation function overseeing test evaluation and governance of AI models and agentic capabilities across embedded cloud and LLM based platforms. Drives AI validation strategy builds high performing teams architects scalable evaluation frameworks and ensures trustworthy AI driven features at automotive scale.

Technologies

PythonLinuxPyTestPlaywrightBehaveJenkinsJIRALangGraphRAGASVector databases

Entités

AI Validation Function

Contextes

AutomobileVéhicules logiciels définis par logicielIntelligence Artificielle embarquéeSystèmes cloud-natifs

Compétences

Leadership d'équipe engineeringStratégie de validation AI/MLDéveloppement et déploiement de systèmes AI/MLArchitectures RAG et modèles de langageFrameworks d'évaluation scalablesMéthodologies d'évaluation hybrides (déterministe et probabiliste)LLM-as-a-JudgeValidation de hallucination et groundingGouvernance AI et Responsible AISystèmes de sécurité critiqueGestion de la conformité automotiveWorkflows agenticOptimisation de retrievalDétection de biais et fairnessValidation end-to-end cloud-native

Challenges détectés

6 enjeux

Transformation
Définir et déployer une stratégie de validation AI transverse (embarquée, cloud, LLM)
Croissance
Construire et scaler une organisation de validation AI haute performance
Optimisation
Architecturer des frameworks d'évaluation scalables pour systèmes AI multi-étapes et workflows agentic
Conformité
Établir la gouvernance AI, les pratiques Responsible AI et la conformité pour systèmes critiques automotive
Conformité
Assurer la qualité et la sécurité des releases AI-enabled à l'échelle automotive
Optimisation
Standardiser les pratiques de test AI de l'ad hoc à l'adoption organisationnelle