En tant que Data Engineer, vous serez au cœur de la transformation des données et jouerez un rôle clé dans la conception et la maintenance des pipelines de données nécessaires à nos projets stratégiques. Vous collaborerez avec les équipes Data Science, Produit et DevOps pour fournir des solutions robustes et innovantes.

Vos missions principales :

• Développement et gestion des pipelines de données :

  • Concevoir, développer et optimiser des pipelines de données performants et scalables.

  • Assurer la collecte, le stockage et la transformation des données en temps réel ou batch.

• Développement d’API :

  • Créer et maintenir des API pour faciliter l’accès et l’intégration des données entre les systèmes.

• Programmation orientée objet :

  • Utiliser des langages comme Python, Java, ou Scala pour structurer et optimiser les projets data.

• Maîtrise des bibliothèques data :

  • Exploiter des bibliothèques telles que Pandas, NumPy, PySpark, ou Dask pour la manipulation et l’analyse des données.

• Cloud et infrastructure :

  • Concevoir des solutions sur des plateformes cloud comme AWS, Azure, ou GCP.

  • Mettre en place et gérer des environnements de stockage, calcul et orchestration (ex : S3, Redshift, BigQuery, Databricks).

• Collaboration et qualité des données :

  • Collaborer avec les équipes pour comprendre les besoins métiers et fournir des solutions adaptées.

  • Assurer la qualité et la gouvernance des données à travers des tests, monitoring et documentations.

Compétences techniques :

• Solides connaissances en programmation orientée objet (Python, Java, Scala).

• Expérience dans le développement d’API RESTful ou GraphQL.

• Maîtrise des bibliothèques de manipulation de données telles que Pandas, NumPy, ou PySpark.

• Expérience avec les services cloud (AWS, Azure, ou GCP) et leurs outils de data engineering (S3, Redshift, BigQuery, Databricks).

• Familiarité avec les outils d’orchestration comme Airflow, Prefect, ou Dagster.

• Entretien avec Oriane tech Talent Acquisition - 30min

• Questionnaire - 30min

• Teams avec Yohan Directeur technique - 30min

• Entretien final avec Thibaud Prouveur Directeur de Visian et un Développeur - 1H