Contexte

Dans le cadre du renforcement de ses équipes data, un acteur du secteur digital recherche un Data Engineer pour intervenir sur des problématiques de traitement et d’exploitation de données à grande échelle.

Missions

*Concevoir et maintenir des pipelines de données (batch & streaming)
*Gérer l’ingestion, la transformation et la qualité des données
*Développer sur des environnements Big Data (Spark, Kafka)
*Mettre en place et optimiser les workflows (Airflow)
*Participer à l’industrialisation des traitements (CI/CD)
*Collaborer avec les équipes Data, DevOps et métiers

*Stack technique
*Scala / Python / SQL avancé
*Spark / PySpark, Kafka
*Airflow (ETL / orchestration)
*Cloud : Azure et/ou AWS
*Git, CI/CD

Profil recherché

*Minimum 3 ans d’expérience en Data Engineering
* Bonne maîtrise de Scala / Spark
*Capacité à être rapidement opérationnel
*Esprit ana...