A quoi va ressembler ton quotidien ?

Tu intègres une équipe data composée d’une dizaine de personnes développant un produit data et IA appelé “MAITE” permettant aux opérateurs d’usine de production de malte de suivre et d’optimiser celle-ci.

Aujourd’hui ce produit est déployé sur une dizaine d’usines sur la trentaine existante dans le groupe Invivo, et nous ambitionnons de le déployer sur toutes les usines d’ici 2026.

L’application est développée en python/pyspark sur une plateforme Databricks, avec des jobs d’ingestion de données qui se lancent toutes les 30 minutes pour les fréquences les plus faibles. Nous lisons la donnée à partir d’API, de fichiers et de base de données SQL pour l’exposer soit via des tables DeltaLake, soit dans une base de données PostgreSQL.

Nos défis pour les prochaines années sont la stabilisation et fiabilisation de notre application, afin de proposer aux opérateurs la donnée et les recommandations de la meilleure qualité possible, et l’amélioration de la performance et de l’efficience.

Pour répondre à ces défis, tu seras accompagné de 3 Data Engineers et d’un Product Owner, et tu interagis avec les équipes BI et IA consommant notre donnée pour leur proposer la donnée dont ils ont besoin, de la meilleure qualité possible et le plus rapidement possible.

En tant que Lead Data Eng. “Maïté”, tu rejoindras les équipes Data pour :

• Faire évoluer des architectures de données pour qu’elles soient robustes et évolutives.

• Modéliser les données issues de processus industriels et de capteurs IoT

• Développer et optimiser des pipelines de données en utilisant les technologies mentionnées.

• Assurer la qualité et l’intégrité des données à travers des processus de validation et de nettoyage.

• Collaborer avec les équipes de data science et d’analytique pour comprendre leurs besoins et fournir des solutions adaptées.

• Effectuer une veille technologique pour proposer des améliorations et des innovations.

Tu contribues aux dynamiques agiles en participant à l’amélioration des pratiques et en partageant via des BBLs (moments de partage informel), des meetups ou des ateliers.

Tu participes à la construction d’un produit logiciel avec des équipes pluri-disciplinaires (UX, UI, OPS, PO, Développeur) alignées sur un objectif commun.

Tu appréhendes les différentes stacks techniques suivantes et en maîtrise une partie : 

• Spark

• Databricks

• Azure Cloud

• Python

• Postgresql

Tu as compris les principes autours de l’industrialisation logicielle et du déploiement continue et tu es à même de les mettre en œuvre dans une infrastructure composée de services managés Azure ou dans une infrastructure conteneurisée avec une intégration continue sous Gitlab CI ou sur Azure Devops.

Tu appréhendes les notions autours du RUN et est capable de les mettre en pratique : 

• mise en œuvre de logs et de métriques

• tir de performance 

• sécurisation des solutions

• …

Tu utilises des outils collaboratifs comme Slack, Jira, Confluence ou encore Figma.

Tu es passionné(e) par les nouvelles technologies et souhaites participer à la construction des solutions Data à destination de l’agriculture 3.0 et de l’industrie 4.0 : viens nous rejoindre !

Nous recherchons un profil confirmé, diplômé Bac + 5 ou équivalent (école d’ingénieur ou universitaire) ayant de solides compétences dans les technologies IaaS, une expérience significative en développement Agile et DevOps, maîtrisant parfaitement Databricks et ayant une expérience sur des stacks de développement Data.

Tes qualités : écoute, capacité à se remettre en question et volonté d’apprendre tant sur la technique que sur le métier, un leadership reconnu et des compétences managériales

• Un 1er contact avec notre RH par visio ou téléphone pour faire connaissance et voir si nous pouvons aller + loin ..

• Un entretien opérationnel avec le Data Engineering Manager pour vous donner des éléments de contexte, une vision élargie du poste et évaluer vos compétences pour ce dernier

• Pour le(s) finaliste(s) un entretien avec le CTO pour se donner l’opportunité mutuelle de se projeter dans une collaboration.

  Bien entendu, l’ensemble de ces échanges peuvent se faire à distance dans un délai que nous nous efforcerons de raccourcir au maximum