Data Engineer Spark & PySpark / Databricks (F/H) - Freelance

Data Engineer Spark & PySpark / Databricks (F/H) - Freelance

Conditions

• Taux journalier (TJM): 400 à 450 €/j
• 2 à 3 jours de télétravail par semaine sur Lyon (07).

Missions

• Faire évoluer l'architecture décisionnelle existante et participer à une migration vers Databricks.
• Faire évoluer la plateforme Data.
• Intervenir sur toutes les étapes de la chaîne décisionnelle, de l'identification à l'exploitation pour le reporting.
• Analyser les besoins métier et identifier les données nécessaires auprès des interlocuteurs.
• Concevoir et enrichir les modèles de données, les entrepôts de données et les datamarts.
• Concevoir des pipelines d'intégration et des traitements Spark pour transformer les données.
• Contrôler, nettoyer les données et optimiser les performances des traitements existants.
• Contribuer à l'évolution de l'architecture dans le cadre de la migration Databricks.
• Réaliser les tests, documenter les solutions, assurer les déploiements et la maintenance.

Profil

• Expérience de 5 ans minimum.
• Maîtrise indispensable de Spark et PySpark pour le développement et l'optimisation.
• Très bonne maîtrise de SQL pour la manipulation et la transformation des données.
• Expérience en modélisation de données.
• Capacité à traduire les besoins métier en solutions techniques.
• Rigueur, autonomie et aisance dans les échanges avec les équipes métier.

Atouts

• Connaissance de Python et/ou Java appréciée.

Autres informations

• Technologies: Apache Spark, Databricks, PySpark.
• Bases de données et stockage: Oracle, S3, Parquet.
• Outils d'intégration et reporting: Informatica, Tableau.
• Gestion de code et déploiement: Git, Jenkins.
• Nous recherchons actuellement un.e Data Engineer Spark & PySpark / Databricks pour rejoindre l'équipe Data/BI de l'un de nos clients.