Data Ingénieur H/F - 13

W hub est une Entreprise de Services du Numérique (ESN) spécialisée dans la fourniture de solutions technologiques avancées.

Fondée par les anciens dirigeants d'une grande ESN, W hub bénéficie d'une connaissance approfondie du marché et des enjeux spécifiques du secteur.Objectif de la mission

Mettre en place une plateforme Data moderne basée sur Microsoft Azure Data Lake et DataBricks, en posant les fondations techniques, en développant des pipelines d'alimentation robustes, et en accompagnant l'adoption de la solution par les utilisateurs de l'usine.

Vos principales missions

Mise en oeuvre technique

Configurer, structurer et déployer Azure Data Lake et DataBricks.

Développer et industrialiser des pipelines d'ingestion de données via Apache NiFi, depuis différentes sources industrielles.

Tenir compte des contraintes techniques (mémoire, réseau, volumétrie...).

Mettre en place et maintenir une instance Unity Catalog pour assurer la gouvernance et le Data Self-Service.

Responsabilités

Garant de la fiabilité de l'environnement Data.

Garant de la qualité et robustesse des pipelines d'ingestion NiFi.

Garant de la mise en place et maintenance du catalogue (Unity Catalog).

Garant de la qualité des livrables : code, documentation, performances.