Contexte
Le secteur de l'environnement et du développement durable est en pleine expansion et nécessite l'exploitation des données pour optimiser les processus et améliorer les performances. Notre client, un acteur de ce secteur, cherche à renforcer son équipe avec un Data Engineer freelance. Le consultant sera en charge de transformer de vastes volumes de données en informations exploitables pour soutenir la prise de décision. L'objectif est d'intégrer des technologies avancées de gestion de données pour assurer une efficacité opérationnelle accrue et contribuer activement à des initiatives écologiques durables.
Responsabilités
Développer, tester et maintenir des architectures de base de données adaptables aux besoins de l'entreprise.
Concevoir et mettre en œuvre des pipelines ETL (Extract, Transform, Load) robustes pour assurer le nettoyage et l'intégration des données provenant de multiples sources.
S'assurer de la qualité et de la conformité des données pour répondre aux standards industriels et aux exigences légales.
Collaborer avec les analystes de données et les équipes scientifiques pour comprendre leurs besoins en données et leur fournir des solutions efficaces.
Proposer des améliorations continues pour optimiser le traitement et l'analyse des données.
Participer à la mise en place de solutions de stockage de données à grande échelle, tout en garantissant leur sécurité et leur disponibilité.
Profil recherché
Expérience confirmée en tant que Data Engineer avec un historique de réussite dans des projets similaires.
Maitrise des technologies de bases de données SQL et NoSQL, et des outils de traitement de données comme Apache Spark et Hadoop.
Connaissances approfondies en conception de pipelines ETL et en gestion de flux de données en temps réel.
Compétences en programmation, notamment dans les langages Python, Java ou Scala.
Capacité à travailler en étroite collaboration avec des équipes multi-disciplinaires et des parties prenantes variées.
Familiarité avec les pratiques de développement durable et un intérêt marqué pour les initiatives environnementales.