Pour un projet européen stratégique, la Banque de France cherche un profil « Référent Data Streaming et bases de données temps réel » pour accompagner le déploiement et l'exploitation d'applications s'appuyant sur des solutions de data management en temps réel.

Les solutions de Streaming et les bases de données temps réel permettent de traiter et d'analyser des flux de données en continu avec une faible latence, facilitant ainsi la prise de décision rapide. Des technologies comme Apache Kafka, Apache Druid et Apache Flink sont employées pour assurer l'ingestion et l'analyse de données en streaming.

L'enjeu à court terme consiste à accompagner les phases de prototypages pour sélectionner les moteurs de bases de données temps réel les plus pertinents en cohérence avec les besoins des métiers, des développeurs et de l'intégration dans les services CLOUD d'infrastructure.

L'équipe d'infrastructure, au sein de laquelle ce poste est rattaché, travaille en mode agile pour délivrer des services CLOUD aux équipes de développement. Les notions d'Infrastructure as Code, d'idempotence et d'immutabilité sont essentielles au quotidien pour construire des services fiables et opérables sur le long terme avec un effort contenu. Une collaboration sur le modèle d'organisation et les activités DevOps est nécessaire avec les autres banques centrales participant au projet.

Vous aurez pour mission de :

·         Gérer l'offre Kafka et Flink

o    Installation et administration des clusters Kafka et Flink

o    Référent technique pour les projets utilisateurs

o    Optimisation et tuning

·         Monter en compétence sur l'administration de Apache Druid

o    Administration de cluster Apache Druid au niveau des principaux noeuds (Broker, Historical, Middle Manager) et leur configuration optimale

o    Tiering, roll-up, optimisation des requêtes à faible latence (<500ms), isolation des ressources du cluster, gestion des mixed workloads, stratégies d'indexation ...

o    Concevoir et déployer une offre en mode multi-tenant avec automatisation en utilisant les pratiques et les services CLOUD INFRA

·         Accompagner les équipes pour utiliser les services, les optimiser (tuning) pour leurs besoins et éventuellement enrichir le catalogue

·         Participer au support et à l'exploitation des offres de services (notamment par la mise en place de solutions d'observabilité et de procédures d'exploitation automatisables)

Formation recherchée : 

• Formation d'ingénieur ou expérience équivalente

Compétences : 

 Connaissances / expérience indispensables :

• Architecture des bases de données temps réel et critères d'utilisation selon les besoins (time series, OLAP, streaming analytics, etc.)

• Technologies Streaming and processing : Apache Flink, Apache Kafka

• Automatisation : Ansible, Terraform

Connaissances / expérience souhaitées :

• bases OLAP (Apache Druid, ClickHouse, Pinot, TimescaleDB)

• IaaS / PaaS en cloud privé (OpenStack / Kubernetes)

• CI/CD (en particulier GitLab CI)

• Observability stack (Elasticsearch, Prometheus/Grafana)

Qualités : 

•  Anglais courant

• Capacités rédactionnelles (y compris en Anglais)

• Capacité à travailler en équipe et dans un environnement multiculturel

• Autonomie et implication

 #LI-BDF

Contactez nos ambassadrices/ambassadeurs  

La Banque de France est une institution socialement responsable, attachée au respect de la diversité sous toutes ses formes, à la lutte contre les discriminations, à favoriser la parité Femme/Homme et à garantir un environnement de travail de qualité.

Des aménagements de poste peuvent être organisés pour tenir compte des handicaps des personnes recrutées.