La description:
DataBricks, Spark, Azure, AWS, Python, ces mots vous parlent, alors lisez la suite ! Si vous souhaitez intégrer nos équipes à Grenoble et accompagner les plus grands acteurs de l'industrie, nous sommes constamment à la recherche de talents pour renforcer notre équipe. Contexte de la mission : Au sein de notre entité Business Applications de Grenoble et intégré(e) au sein d'une équipe projet, vous contribuez à l'élaboration et l'évolution des couches métiers des applications que nous réalisons pour nos clients. Vous participez à des projets innovants à forte valeur ajoutée, à la fois technologique et métier. En tant que Cloud Data Engineer (H/F), vous serez chargé de concevoir, développer et maintenir des solutions de traitement des données sur de plateformes d'IA s'appuyant sur Azure et AWS pour répondre aux besoins externes et internes. Vous serez responsable de la conception et de l'implémentation de pipelines de données efficaces, de la gestion de la qualité des données, ainsi que de la collaboration avec les équipes (70 personnes) pour répondre aux besoins métier. Activités : - Concevoir et mettre en place de pipelines de données capables de traiter un large éventail de données structurées, semi structurées et non structurées sur les plateformes Cloud telles que AWS ou Azure. - Création de flux ETL pour la collecte et l'agrégation de données, garantissant leur fiabilité et leur intégrité. - Maintenir et améliorer des modèles de Data Engineering existants afin de répondre aux différents besoins métier et cas d'utilisation. - Assurer la qualité des données en mettant en place des processus de nettoyage, de transformation et de validation des données. - Intégrer les exigences de l'équipe IA, ainsi que des impératifs de sécurité dans les développements de données, en fournissant des recommandations pertinentes pour des solutions efficaces. - Ecrire de l'infrastructure en tant que code pour déployer notre infrastructure de données - Identification, implémentation et partage de composants et de bibliothèques réutilisables entre différents contextes. - Spécification, conception, mise en œuvre, test, validation et industrialisation de fonctionnalités avancées de gestion des données, intégrées aux produits, systèmes et solutions. - Collaboration étroite avec des experts en données et dans divers domaines pour sélectionner et mettre en œuvre les méthodes, outils et technologies de transformation des données, permettant le développement de plateformes et d'offres de produits innovantes. - Contributions à la protection de la propriété intellectuelle, à la capitalisation des connaissances et à la communication interne et externe, assurant ainsi la diffusion efficace des bonnes pratiques et des innovations. Environnement technique : Langages : Python, Scala, SQL Plateformes cloud: Microsoft Azure, AWS Outils : Spark, Kubernetes, Databricks, Docker, OpenDataSoft, Github, Terraform. PROFIL RECHERCHÉ : - Au moins cinq années d'expérience dans le domaine du traitement des données et de l'informatique. - Diplôme universitaire supérieur en génie logiciel ou science des données. - Expertise en ingénierie de pipelines de données, utilisant des technologies telles que Spark ou leurs équivalents gérés par les principaux fournisseurs de services cloud. - Compétences et expérience en génie logiciel, incluant la capacité à coder, déboguer, tester (notamment les tests unitaires, fonctionnels et d'intégration) et résoudre les problèmes tout au long du processus de développement d'applications, en adoptant une approche agile. - Une connaissance du secteur de la gestion et de l'automatisation de l'énergie serait un atout. - Axé sur la résolution de problèmes, l'atteinte des objectifs et l'application pratique de la technologie dans des situations réelles. - Maîtrise de l'anglais et du français