Data manager (H/F)
Salaire: 40 000 € - 65 000 € par an Tu es passionné(e) par la Data Engineering et tu aimes concevoir des plateformes de streaming capables de traiter des flux de données en temps réel ? Java, Scala, Kafka et les architectures orientées événements font partie de ton quotidien ? Rejoins la Guild Data Factorii en tant que Data Engineer Java / Kafka et participe à des projets stratégiques de transformation data au sein d'un environnement technique de pointe. Mais qu'est-ce que l'équipe Data Factorii adresse ? En tant que Data Engineer H/F, tes missions seront de: * Concevoir et développer des traitements de données distribués: construire, maintenir et faire évoluer des applications de streaming performantes avec Kafka Streams, capables de gérer de très grands volumes tout en garantissant leur fiabilité. * Développer des architectures orientées événements (Event-Driven): participer à la conception de plateformes de streaming temps réel exploitant Kafka et Pub/Sub. * Développer des services et API robustes: concevoir, développer et maintenir des composants applicatifs en Java et/ou Scala, en t'appuyant sur SpringBoot. * Contribuer aux traitements ELT/ETL: participer au développement et à l'évolution des traitements de transformation de données au sein des pipelines existants. * Orchestrer les traitements de données: planifier, monitorer et fiabiliser les pipelines via Apache Airflow / Cloud Composer. * Industrialiser les développements Data: automatiser les déploiements et garantir la qualité des livrables grâce à Git et aux pipelines CI/CD (GitLab CI). * Collaborer avec les équipes techniques et métiers: travailler en étroite collaboration avec les équipes de développement, de production et les différents interlocuteurs métier afin de proposer des solutions adaptées aux enjeux business. * Participer à l'amélioration continue: être force de proposition sur les évolutions techniques, les performances des traitements et les bonnes pratiques de développement. Concrètement, qu'est-ce qu'on demande ? En 1er, un savoir-être en phase avec notre culture: * Tu es curieux(se) et passionné(e) par les technologies Data. * Tu apprécies le travail en équipe et sais collaborer dans des environnements agiles. * Tu fais preuve de rigueur, d'autonomie et d'un fort esprit d'analyse. * Tu es force de proposition et aimes relever des défis techniques. En 2nd, un bagage technique solide: * Une expérience de 5 ans minimum en tant que Data Engineer. * Une maîtrise confirmée de Java et/ou avec une bonne connaissance de Scala. * Une expérience significative en développement de traitements de streaming avec Kafka Streams. * Une bonne maîtrise des architectures de data streaming (Kafka, Pub/Sub). * Une bonne maîtrise de Spring Boot pour le développement d'API et de services. * Une expérience en traitement de données ETL/ELT. * Une expérience avec Apache Airflow / Cloud Composer. * Une maîtrise des outils Git, des chaînes CI/CD (GitLab CI) et des environnements Linux. * Une expérience des méthodologies Agile / Scrum. Les petits plus qui feront la différence: * Une connaissance d'Apache Spark pour les traitements batch et distribués. * Une expérience avec BigQuery, Bigtable et Elasticsearch. * Une expérience en développement d'API avec Scalatra et en déploiement d'applications sur Kubernetes. * Une bonne compréhension des enjeux de performance, de scalabilité et d'industrialisation des traitements Data à grande échelle. * Une expérience des bonnes pratiques d'observabilité (monitoring, logging, alerting) serait appréciée. Et surtout, tu as envie de participer à des projets ambitieux où la Data est au cœur de la stratégie des entreprises ? Alors rejoins Data Factorii et construisons ensemble les plateformes Data de demain ! Ce que nous t'offrons ? *
Débutant accepté