Data Engineer Big Data (BigQuery / dbt / Airflow) H/F - CDI

Data Engineer Big Data (BigQuery / dbt / Airflow) H/F - CDI

Conditions

• Salaire: 40 000 € - 70 000 € par an
• Un salaire attractif qui évolue en

Missions

• Concevoir et développer des pipelines de données performants en construisant et maintenant des traitements ELT/ETL robustes pour de gros volumes.
• Modéliser la donnée pour concevoir des modèles adaptés aux besoins analytiques et métier.
• Développer et industrialiser les transformations avec dbt, incluant l'écriture, les tests et la documentation des modèles.
• Optimiser les performances sur BigQuery via le partitionnement, le clustering et le tuning des requêtes.
• Orchestrer les traitements de données en planifiant et monitorant les pipelines via Apache Airflow / Cloud Composer.
• Contribuer à l'intégration de flux temps réel via Kafka ou Pub-Sub.
• Industrialiser les développements Data en automatisant les déploiements avec Git et GitLab CI.
• Collaborer avec les équipes techniques et métiers pour proposer des solutions adaptées aux enjeux business.
• Participer à l'amélioration continue des évolutions techniques et des bonnes pratiques de développement.

Profil

• Expérience de plus de 5 ans en tant que Data Engineer.
• Excellente maîtrise experte de SQL et de BigQuery sur des traitements de gros volumes.
• Solide expérience sur Google Cloud Platform (GCP).
• Bonne maîtrise de dbt pour la transformation et la documentation des données.
• Expertise confirmée en modélisation de la donnée, traitement ELT/ETL et optimisation de requêtes.
• Bonne connaissance des architectures de data streaming (Kafka, Pub/Sub).
• Expérience avec Apache Airflow / Cloud Composer.
• Maîtrise des outils Git, CI/CD (GitLab CI) et des environnements Linux.
• Expérience en méthodologie Agile / Scrum.
• Rigueur, autonomie et fort esprit d'analyse.

Atouts

• Connaissance de BigTable, ElasticSearch et Kubernetes.
• Sensibilité aux enjeux de coûts et de performance sur GCP.
• Expérience sur des plateformes Data à très grande échelle.