Ingénieur Big Data H/F

📍 TOURS Back-end CDI 💸 Salaire non mentionné

Description du poste

Votre mission LHH Recruitment Solutions, cabinet de conseil en recrutement, intérim spécialisé, management de transition, et évaluation d' , cadres et , recherche pour son client un Ingénieur Big Data H/F basé à Tours. Rattaché à une équipe spécialiste de la donnée, vous serez chargé de collecter des données à partir de diverses sources (internes et externes), de les préparer et de les intégrer de manière fiable. Vos missions : Participer à la conception de solutions permettant le traitement de volumes importants de flux de données et ceci en toute sécurité.Contribuer à la structuration des bases de données (sémantique, format, etc.) ainsi qu'à la gestion des référentiels.Participer à la cartographie et à la documentation des sources de données.Participer à l'évolution des composants techniques du socle (spécification, développement tests et documentation) en garantissant l'interopérabilité des systèmes et des applications.Développer les composants permettant l'intégration dans la plate-forme Big Data de données structurées (bases de données relationnelles, fichiers CSV, etc.) et des données non structurées (texte, images, vidéos). Vous en assurerez également la maintenance.Optimiser les processus d'intégration des données pour garantir des performances élevées.Vous serez garant de la qualité des données qui alimentent le Data Lake afin d'en faciliter l'exploitation par les équipes de Data Science.Contribuer à la supervision des traitements.Participer à la communauté technique qui met en œuvre les dispositifs prévus ou nécessaires à l'application de la politique de la donnée de l'entreprise.Collaborer étroitement avec les data scientists, data analysts ainsi que les architectes pour répondre aux besoins spécifiques de chaque projet.Votre profil De formation supérieure en informatique de type Diplôme d'ingénieur en informatique ou équivalent. Vous justifiez d'une expérience d'environ 2 ans dans la mise en œuvre et le fonctionnement d'une plate-forme Big Data. Vos atouts pour réussir dans vos missions seront les suivants : - Maitrise des technologies et outils de stockage de données objet S3 (Miniao, Parquet, ICEBERG), structurées (SQL Postgres SQL) et non structurées (NO SQL MongoDB, Elastic). - Maitrise des cadriciels de type Spark. - Maitrise des langages de programmation (.NET, Java, Python, R). - Maitrise d'outils de requête (Trino, Stardust). - Maitrise de suites logicielles permettant le design, la conception et la mise en œuvre de solution Big Data telles que Airflow ou autres. - Connaissance des produits GIT, Apache, Antifactory, Openshit, Zabbix, Docker. Pour faire la différence :

☕ java 🕥 Dernière mise à jour il y a 1 semaine