Développeur Data Lake / Data Engineer- mission freelance

Description du poste

Nous recherchons un Data Engineer senior pour intégrer une équipe IT Data dynamique et participer au développement d'une plateforme Databricks innovante. Basé à Montrouge, ce rôle vous positionne au cœur de la transformation digitale, où vous jouerez un rôle clé dans la conception et l'implémentation de modules de datalake stratégiques.

• Concevoir et optimiser des flux de données complexes au sein du datalake.
• Participer activement à la livraison de projets stratégiques en collaboration avec les équipes métiers.
• Assurer l'implémentation des premiers cas d'usage de la plateforme Databricks.
• Collaborer avec les équipes Business Development pour aligner les solutions techniques avec les besoins métiers.
• Industrialiser les processus de traitement de données en utilisant des méthodologies DevOps.

Qualifications

• Maîtrise des langages Java, Python et SQL pour le développement de pipelines de données.
• Expérience avec Databricks, PySpark et les technologies de Change Data Capture (CDC).
• Connaissance des outils de streaming tels qu'Apache Kafka et Qlik Replicate.
• Capacité à travailler dans un environnement agile et à collaborer en anglais.
• Apprécié : expérience avec AI-Assisted Development et Streaming Ingestion.
• Capacité à résoudre des problèmes complexes et à innover dans des environnements changeants.

Expérience

Nous recherchons un professionnel avec une expérience significative en data engineering, idéalement avec une expertise démontrée dans la gestion de projets complexes et l'implémentation de solutions sur Databricks. Une capacité à naviguer efficacement dans un environnement anglophone est essentielle.

• Expérience préalable dans l'optimisation de pipelines de données à grande échelle.
• Expérience réussie de collaboration avec des équipes interfonctionnelles dans un contexte technique et métier.