Visian, Société de conseil spécialisée en innovation, design produit, gestion de projet IT et développement Data. Recherche un Data Engineer pour un de ces clients dans le domaine de l’énergie.

Nous recherchons un Data Engineer passionné et confirmé pour rejoindre notre équipe. Vous serez dans une équipe en charge du Lakehouse pour le B2C. De nombreux challenges techniques sont attendus.

Mission

• Contribuer à la conception de outils de traitement BigData (Ingestion / Traitement / Analyse)

• Cadrage technique des besoins émis par les consommateurs de la plateforme Data

• Etre garant de la mise en production des traitements au sein de la plateforme

• Optimisation du code et de la capacité des VMs mise en œuvre pour chaque traitement

• Garantir la disponibilité et l’outillage pour les équipes métier, ainsi qu’aux utilisateurs de la plateforme (data scientists / data analystes / data engineer)

• Etre en relation avec les équipes infrastructure afin d’assurer le cadrage et le déploiement des solutions valides

• Support aux équipes consommatrices

• Analyse d’anomalie et proposition solution court / moyen terme

• Développement sous Databrick (Python / SQL / Spark / Airflow)

• Etre force de propositions techniques

• Stack Technologique :

• Plateformes Cloud : AWS / GCP / Azure 2 ans d’expérience requise.

• Langages de Programmation : Python, SQL

• Outils de Traitement de Données : Spark

• +2ans d’expériences

• Expérience pratique dans la conception et le développement de pipelines de données cloud.

• Solides compétences en programmation, en particulier avec Python, et en requêtage SQL.

• Connaissance approfondie des plateformes cloud (AWS / GCP / Azure) et de leurs services associés.

• Expérience dans la mise en œuvre de solutions de stockage de données et d’entrepôts de données cloud.

• Familiarité avec les principes du développement orienté objet avec une expertise en Python.

• Capacité à travailler de manière autonome, à résoudre des problèmes complexes et à gérer plusieurs tâches simultanément.

• Maîtrise de l’anglais (écrit et parlé) pour une communication efficace au sein d’une équipe internationale.

• 1 échange téléphonique (30min)

• 1 test technique (20min)

• 1 échange dans nos bureaux avec la direction et un consultant tech sénior (1h30min)