Missions
Le Data engineer conçoit et met en œuvre des infrastructures de données pour collecter, stocker et traiter de grandes quantités de données. Il développe et optimise des pipelines de données, assure l’intégrité et la qualité des données, et veille à la performance des systèmes de traitement de données. Ses missions incluent la collecte et la préparation des données, la gestion des bases de données, et la collaboration avec les data scientists pour répondre aux besoins analytiques.
Compétences attendues
- Maîtrise des langages de programmation (Python, Java, Scala)
- Connaissance des systèmes de gestion de bases de données et des outils ETL
- Compétences en conception de pipelines de données et en optimisation de performances
- Connaissance des technologies Big Data (Hadoop, Spark)
- Compétences en gestion de projet et en sécurité des données
Profil type
- Formation : Bac+5 en informatique, data engineering, ou équivalent
- Expérience : Minimum 3 à 5 ans d’expérience en ingénierie des données ou en Big Data