Data Engineer Scala Aws H/F - Opus rs

Opus Recruitment Solutions est un cabinet de recrutement international spécialisé dans les profils technologiques et digitaux. Fondée en 2008, l'entreprise accompagne les entreprises dans le recrutement de talents en IT, développement logiciel, data, cloud et transformation digitale. Elle propose des solutions de recrutement en CDI, freelance et contractuel, et intervient dans plusieurs pays, notamment au Royaume-Uni, en Europe et aux États-Unis. Opus se distingue par son expertise sectorielle et son approche centrée sur les besoins spécifiques de ses clients et candidats.
CDIClient finalLyonNotre partenaire, dévelope une plateforme data capable de traiter des volumes massifs de données et d'attribuer la performance de manière fiable, à l'échelle.Dans ce contexte, ils recrutent un(e) Data Engineer confirmé(e) pour renforcer notre équipe Data Platform.Vous contribuerez à la conception, au développement et à l'exploitation d'une plateforme data distribuée à forte volumétrie.Missions:Concevoir et faire évoluer des pipelines de traitement de données à grande échelleDévelopper des traitements distribués robustes et maintenables (principalement en Scala)Participer aux choix d'architecture et aux décisions techniquesOptimiser les performances et les coûts des traitementsGarantir la qualité et la fiabilité des données en productionParticiper aux code reviews et à l'amélioration continue des pratiques engineeringInvestiguer et résoudre des problématiques complexes (performance, debugging)Collaborer avec les équipes Data, Produit et BackendVous contribuerez également à l'évolution des pratiques techniques : Qualité logicielle, Observabilité,Tests et CI/CD,Industrialisation des pipelinesStack technique : Scala, Apache Spark, SQL, Airflow, AWS,Docker

Vous disposez de 3 à 5 ans d'expérience en tant que Data Engineer et avez déjà évolué sur des systèmes data en production avec des contraintes fortes (volumétrie, performance, fiabilité). Une maitrise de Spark en production est attendue (Scala idéalement), ainsi qu'une expérience cloud AWS.Nous recherchons un profil rigoureux dans la conception et la qualité du code, sensible aux bonnes pratiques, avec une approche orientée solutions.

• Docker
• Gestion des données
• Rigueur et méthode
• AWS
• Scala
• SQL
• Apache spark