Contexte
Nous recherchons un consultant freelance pour une mission en tant que Data Engineer dans le secteur du bâtiment et de la construction. L'entreprise souhaite moderniser ses processus de gestion des données pour améliorer l'efficacité de ses projets et optimiser les coûts. Dans le cadre de cette mission, vous serez chargé de concevoir et de mettre en place des solutions de stockage et de traitement des données pour soutenir les différents services de l'entreprise. Vous travaillerez en étroite collaboration avec les équipes IT et les experts métiers pour identifier les besoins en données et proposer des solutions adaptées.
Responsabilités
Concevoir et développer des pipelines de données robustes et efficaces pour garantir l'intégrité et la qualité des données tout au long de leur cycle de vie
Implémenter et gérer des systèmes de stockage de données adaptés aux besoins de l'entreprise, en choisissant les technologies appropriées
Intégrer des solutions de traitement des données en temps réel pour répondre aux exigences métiers
Collaborer avec les équipes de développement logiciel pour assurer la compatibilité des solutions de données avec les applications existantes
Assurer la sécurité et la conformité des données en appliquant les meilleures pratiques en matière de gestion des données
Fournir un support et des conseils techniques aux équipes projets pour les aider à exploiter pleinement les solutions de données mises en place
Profil recherché
Expérience significative en tant que Data Engineer, idéalement dans le secteur du bâtiment et de la construction
Excellente maîtrise des technologies de traitement des données, telles que Hadoop, Spark, Kafka, etc.
Compétences avancées en programmation, notamment en Python, Java, ou Scala
Expérience en conception et gestion de bases de données relationnelles et NoSQL
Connaissances solides en architecture de données et en modélisation de données
Capacité à travailler de manière autonome et à collaborer efficacement avec des équipes multidisciplinaires
Excellentes compétences en communication pour présenter des concepts techniques à des audiences non techniques