Senior Data Engineer - Data Architect Databricks H/F - 69

Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.

Data Driven a pour ambition d'aider ses clients à transformer la valeur de leurs données en succès durable. Nous tirons parti à la fois de notre expertise sur les plateformes technologiques les plus innovantes et de notre connaissance métier avec la meilleure combinaison d'experts pour accompagner nos clients dans leur quête d'agilité, de compétitivité et de croissance durable.

Rejoignez notre équipe lyonnaise dans des projets innovants, dans un environnement propice à la formation et au développement continu. Nos clients sont des grands comptes de secteurs d'activité variés (Industrie, Transport, Logistique, Banque, Assurance, Energie...).Vos missions :

- Concevoir et construire des pipelines de données robustes sur Databricks, en utilisant PySpark et Spark SQL.
- Recueillir les besoins, participer aux ateliers de conception et optimiser les flux de données.
- Assurer la qualité du code et des données à travers des tests techniques, des revues de code et la gestion des anomalies.
- Contribuer à l'amélioration continue des processus par l'automatisation et l'application des bonnes pratiques.
- Participer activement aux cérémonies agiles et maintenir une veille technologique constante.