Contexte
Nous recherchons pour l'un de nos clients du secteur de l'Énergie un Data Engineer freelance pour une mission stratégique. L'objectif principal est de développer et optimiser les infrastructures de données pour soutenir les besoins analytiques de l'entreprise. Le client souhaite améliorer la gestion et l'analyse de ses données afin de faciliter la prise de décision et d'optimiser ses opérations internes. Ce projet implique de travailler en étroite collaboration avec les équipes techniques et les parties prenantes pour garantir que les solutions de données mises en place sont robustes, évolutives et répondent aux exigences commerciales spécifiques.
Responsabilités
Concevoir, développer et maintenir les pipelines de données pour faciliter l'intégration et le traitement des données provenant de multiples sources.
Optimiser l'architecture existante des données pour améliorer l'efficacité et les performances des systèmes.
Collaborer avec les équipes de développement et d'analytique pour comprendre les besoins et fournir des solutions adaptées.
Garantir la qualité et la fiabilité des données tout au long du processus de traitement et de stockage.
Assurer la veille technologique pour identifier et proposer des innovations et améliorations possibles.
Documenter les processus et les solutions développées pour faciliter leur compréhension et leur maintenance par les autres membres de l'équipe.
Profil recherché
Expérience avérée en tant que Data Engineer avec une solide compréhension des architectures de données et des technologies Big Data.
Maîtrise des outils de traitement des données tels que Hadoop, Spark, ou Kafka.
Compétences avancées en SQL et connaissance des bases de données relationnelles et NoSQL.
Expérience dans le développement de pipelines ETL (Extraction, Transformation, Chargement).
Bonne compréhension des principes de gestion de la qualité des données.
Capacité à travailler en équipe et à communiquer efficacement avec des profils techniques et non techniques.
Autonomie, rigueur et sens de l'initiative pour proposer des solutions innovantes.