Contexte
Le client, un acteur majeur dans le secteur de l'énergie, cherche à optimiser ses systèmes de gestion de données pour mieux répondre aux défis liés à la transition énergétique. Dans ce contexte, le client souhaite s'appuyer sur un(e) consultant(e) expert(e) en ingénierie des données pour renforcer son équipe actuelle. La mission vise à améliorer l'efficacité des flux de données et à soutenir l'innovation en matière de solutions énergétiques durables.
Responsabilités
Assurer l'intégration et le traitement des données provenant de diverses sources afin de fournir des informations exploitables pour l'entreprise.
Concevoir, développer et optimiser des pipelines de données robustes et évolutifs.
Collaborer avec les équipes d'analystes et de data scientists pour comprendre les besoins en données et créer des jeux de données analytiques de haute qualité.
Mettre en œuvre les meilleures pratiques en matière de sécurité et de conformité des données.
Participer à la migration des systèmes existants vers des plateformes de données modernes dans le cloud.
Réaliser une veille technologique pour recommander des outils et des technologies innovants dans le domaine de l'ingénierie des données.
Profil recherché
Expérience confirmée en tant que Data Engineer avec une bonne maîtrise des langages de programmation comme Python ou Java.
Excellente compréhension des outils de gestion de données Big Data tels que Hadoop, Spark, ou Kafka.
Maîtrise des bases de données relationnelles et NoSQL, par exemple, MySQL, PostgreSQL, MongoDB.
Compétences éprouvées dans la construction de pipelines de données dans des environnements cloud tels qu'AWS, Azure ou Google Cloud Platform.
Capacité à travailler de manière autonome tout en collaborant efficacement avec des équipes multidisciplinaires.
Bonne connaissance des méthodologies Agile pour la gestion de projets.