Data Engineer Kafka (H/F)

Soors est une société de conseil spécialisée dans l'accompagnement des entreprises pour leurs projets IT et data. Nous proposons à nos clients des experts hautement qualifiés pour intervenir sur des missions stratégiques et innovantes, en France et à l'international. Notre positionnement est fondé sur la qualité, la transparence et la confiance, ainsi que sur la valorisation des talents. Nous attachons une grande importance au développement professionnel et personnel de nos consultants, en favorisant la montée en compétences, la collaboration et l'engagement. Rejoindre Soors, c'est intégrer un environnement stimulant, où l'innovation et l'excellence sont au coeur de notre culture.

Le poste:

Dans le cadre d'une mission longue durée, vous contribuerez à la transformation des architectures data d'un grand groupe en accélérant la transition vers une plateforme événementielle moderne.

Poste et missions:

• Mettre en place et configurer une plateforme Kafka en self-service pour le groupe.
• Développer et intégrer des pipelines CI/CD via GitLab.
• Implémenter des outils self-service à l'aide de Kafka Resource Operator (KRO).
• Rédiger la documentation, les guides de bonnes pratiques et les procédures d'exploitation.
• Assurer le support technique auprès des équipes consommatrices de la plateforme.

Responsabilités:

• Modernisation des flux ETL historiques vers une architecture cible.
• Garantir la qualité, la sécurité et l'automatisation de la plateforme.
• Collaboration avec les équipes internes pour la montée en compétence sur Kafka.

Environnement technique:

• Apache Kafka & Kafka Connect
• Kubernetes & Docker
• GitLab CI/CD
• Approche GitOps/Infrastructure as Code (IaC)
• Outils de monitoring: Prometheus, Datadog, OpenTelemetry
• Data Platform: Data Lake, Data Mesh, Iceberg/Snowflake

Modalités:

• Mission de 12 mois
• Basée à Villeneuve-d'Ascq (59)
• Télétravail partiel possible

Profil recherché:

Nous recherchons un Data Engineer confirmé disposant d'une expertise sur les plateformes Kafka et les architectures data modernes.

Expérience:

• Expérience significative sur Apache Kafka, Kafka Connect et leur écosystème.
• Pratique des environnements CI/CD, GitLab et méthodologies GitOps/IaC.

Formation:

• Formation supérieure en informatique ou data engineering (Bac+4/+5 recommandé).

Compétences techniques:

• Maîtrise de Kubernetes, Docker, monitoring (Prometheus, Datadog, OpenTelemetry).
• Familiarité avec les concepts Data Platform (Data Lake, Data Mesh, Iceberg/Snowflake).
• Expérience avec KRO, FinOps et Cloud Providers est un plus.

Soft skills:

• Autonomie, rigueur, capacité d'adaptation et esprit d'équipe.
• Excellentes compétences rédactionnelles et pédagogiques.

Contraintes:

• Disponibilité pour une mission de longue durée (12 mois).
• Télétravail partiel possible.