Data Engineer / Développeur Big Data - Spark Java & Databricks (F/H) - Freelance

Data Engineer / Développeur Big Data - Spark Java & Databricks (F/H) - Freelance

Conditions

• Taux journalier (TJM): 430 à 450 €/j.
• 2 jours de télétravail par semaine, basé à Lyon (07).

Missions

• Migrer des traitements Informatica et PL/SQL vers Spark en Java.
• Concevoir, développer et maintenir des pipelines de données.
• Optimiser la performance et la robustesse des traitements existants.
• Assurer la maintenance corrective et évolutive des traitements SQL / PL-SQL.
• Intervenir sur le BUILD et le RUN pour comprendre les traitements de bout en bout.
• Veiller à la qualité et à la fiabilité des données produites.
• Concevoir les futurs pipelines de données sous Databricks.
• Participer aux choix de conception et d'architecture.
• Industrialiser les nouveaux traitements.
• Faire évoluer les pratiques de développement et d'exploitation sur la plateforme Databricks.
• Participer à la guilde Spark pour échanger sur les choix de conception et la roadmap technique.
• Contribuer aux bonnes pratiques de développement et d'exploitation.
• Participer au partage de connaissances au sein de l'équipe.
• Contribuer à l'amélioration continue des traitements.
• Mettre à jour la documentation technique.

Profil

• Être à l'aise avec les problématiques de Data Engineering et le traitement de volumes importants.
• Maîtriser Spark pour concevoir, développer et optimiser les pipelines de données.
• Posséder de solides compétences en Java pour les développements Spark.
• Maîtriser SQL et PL/SQL.
• Justifier d'une expérience de 3 ans minimum.

Atouts

• Expérience avec Oracle, Informatica, Ceph, Maven, Control-M, Git, Jenkins, Terraform ou Tableau Server.

Autres informations

• Nous recherchons un-e Data Engineer / Développeur Big Data Spark pour rejoindre un projet qui offre une trajectoire technique intéressante: moderniser progressivement un SI Data existant, puis participer à sa migration vers Databricks dans le cloud.