En tant que Lead Data Engineer Palantir Foundry, vous interviendrez sur tout le cycle de vie data/ops dans Foundry :
Co-concevoir l’Ontologie métier en lien avec les équipes produit et métiers, afin d’aligner les jeux de données et modèles sur des concepts réels et opérables.
Définir et industrialiser des Data pipelines (PySpark, SQL) : ingestion, normalisation, qualité, historisation, optimisation des coûts/performances, scheduling et monitoring.
Garantir la qualité, la sécurité et la gouvernance : versioning, traçabilité/lineage, contrôles d’accès, normes de code et de tests (en s’appuyant sur les mécanismes de gouvernance Foundry et les guidelines PySpark).
Animer et faire grandir l’équipe : cadrage technique, mentoring, pair programming, revues de conception, diffusion des standards Foundry & Spark.
Piloter l’amélioration continue : définir et suivre des KPI (fraîcheur, SLA, fiabilité, coût), automatiser la détection des régressions et l’observabilité des jobs.