Ingénieur Big Data H/F
Description du poste
LHH Recruitment Solutions, recherche pour son client un Ingénieur Big Data H/F basé à Tours. Rattaché à une équipe spécialiste de la donnée, vous serez chargé de collecter des données à partir de diverses sources (internes et externes), de les préparer et de les intégrer de manière fiable. Vos missions : - Participer à la conception de solutions permettant le traitement de volumes importants de flux de données et ceci en toute sécurité. - Contribuer à la structuration des bases de données (sémantique, format, etc.) ainsi qu'à la gestion des référentiels. - Participer à la cartographie et à la documentation des sources de données. - Participer à l'évolution des composants techniques du socle (spécification, développement tests et documentation) en garantissant l'interopérabilité des systèmes et des applications. - Développer les composants permettant l'intégration dans la plate-forme Big Data de données structurées (bases de données relationnelles, fichiers CSV, etc.) et des données non structurées (texte, images, vidéos). Vous en assurerez également la maintenance. - Optimiser les processus d'intégration des données pour garantir des performances élevées. - Vous serez garant de la qualité des données qui alimentent le Data Lake afin d'en faciliter l'exploitation par les équipes de Data Science. - Contribuer à la supervision des traitements. - Participer à la communauté technique qui met en œuvre les dispositifs prévus ou nécessaires à l'application de la politique de la donnée de l'entreprise. - Collaborer étroitement avec les data scientists, data analysts ainsi que les architectes pour répondre aux besoins spécifiques de chaque projet. Vos atouts pour réussir dans vos missions seront les suivants : - Maitrise des technologies et outils de stockage de données objet S3 (Miniao, Parquet, ICEBERG), structurées (SQL Postgres SQL) et non structurées (NO SQL MongoDB, Elastic). - Maitrise des cadriciels de type Spark. - Maitrise des langages de programmation (.NET, Java, Python, R). - Maitrise d'outils de requête (Trino, Stardust). - Maitrise de suites logicielles permettant le design, la conception et la mise en œuvre de solution Big Data telles que Airflow ou autres. - Connaissance des produits GIT, Apache, Antifactory, Openshit, Zabbix, Docker.
☕ java 🕥 Dernière mise à jour il y a 2 semainesExpérience requise
2 An(s) - plate-forme Big Data
Offres d'emplois similaires
Développeur/se - Full Stack - Industrie & Services - Annecy (H/F)
Forum emploi-formation-alternance: talents handicap
Ingénieur informatique spécialisé logiciel JAVA J2EE (H/F)
Offres d'emplois dans la même ville
Développeur Java JEE H/F
Lhh
Architecte d'applicatif F/H (poste ouvert Tours où Paris) (H/F)
ADECCO
LHH Recruitment Solutions, cabinet de conseil en recrutement et évaluation d'experts, cadres et dirigeants, vous accompagne tout au long de votre carrière et s'assure que vous soyez " Ready For Next ".A votre écoute, nos experts en recrutement vous guident pour aller de l'avant et faire évoluer votre carrière vers la prochaine étape.