Data manager (H/F)
Description du poste
Description du poste : En tant que cabinet de recrutement spécialisé dans l'emploi et le handicap, Talents Handicap accompagne de très nombreuses entreprises & organisations en France dans leurs recrutements de collaborateurs en situation de handicap. Dans ce cadre, nous recherchons pour le poste ci-dessous des candidats, en situation de handicap et vous invitons à postuler si vous correspondez au profil. L'entreprise Sopra Steria recherche activement des profils pour le poste suivant : Description de l'entreprise Sopra Steria, acteur majeur de la Tech en Europe avec 55 000 collaborateurs dans près de 30 pays, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Il aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et durables. Le Groupe apporte une réponse globale aux enjeux de compétitivité des grandes entreprises et organisations, combinant une connaissance approfondie des secteurs d'activité et des technologies innovantes à une approche résolument collaborative. Sopra Steria place l'humain au centre de son action et s'engage auprès de ses clients à tirer le meilleur parti du digital pour construire un avenir positif. En 2022, le Groupe a réalisé un chiffre d'affaires de 5,1 milliards d'euros. The world is how we shape it. Description du poste Votre futur environnement de travail : Intégré(e) au sein de l'agence « Services Publics » de Nantes (350 collaborateurs, 50M€ de CA/an), vous rejoignez une équipe Data et prenez une part active aux projets délivrés pour le compte d'un grand client public. Vous intervenez depuis nos sites de Nantes, situés à Saint Herblain. Votre rôle et vos missions : Vous intégrez l'équipe d'Intégration de la Donnée, équipe responsable de la gestion des données, garantissant qu'elles sont collectées, préparées et intégrées de manière fiable pour alimenter les analyses et les applications de l'équipe Big Data. Vous jouez un rôle clé dans la transformation des données brutes en informations exploitables.***Collecte de Données - Vous avez la charge de collecter des données à partir de diverses sources internes et externes. Cela peut inclure des bases de données, des fichiers, des API, des flux de données en continu, des capteurs, etc. * Extraction, Transformation et Chargement (ETL) - Vous effectuez des opérations d'ETL pour extraire les données des sources, les transformer en fonction des besoins (nettoyage, normalisation, agrégation, enrichissement, etc.) et les charger dans le système. * Intégration des Données Structurées et Non Structurées - Vous gérez à la fois des données structurées (bases de données relationnelles, fichiers CSV, etc.) et des données non structurées (texte, images, vidéos) et les intègrerez dans l'environnement Datascience. * Gestion des Flux de Données en Continu - Vous traitez les flux de données en continu provenant de sources telles que les capteurs IoT ou les journaux d'événements en temps réel, en garantissant leur disponibilité et leur intégrité. * Sécurité des Données - Vous veillez à ce que les données collectées et intégrées soient sécurisées, en appliquant des mécanismes de chiffrement, de contrôle d'accès et de gestion des identités lorsque cela est nécessaire. * Gestion des Métadonnées - Vous documentez et gérez les métadonnées associées aux sources de données, aux transformations effectuées et aux schémas de données, en vue de faciliter la compréhension des données pour les Data Scientists et les analystes. * Performance et Évolutivité - Vous optimisez les processus d'intégration des données pour garantir des performances élevées et une évolutivité afin de gérer des volumes de données en croissance constante. * Collaboration avec les Autres Équipes - Vous collaborez étroitement avec les Data Scientists, les experts fonctionnels, les Architectes Data et les autres membres de l'équipe pour répondre aux besoins spécifiques de chaque projet. * Planification et Automatisation - Vous planifiez les tâches d'intégration des données en fonction des besoins métier et mettez en place des mécanismes d'automatisation pour réduire les délais et minimiser les erreurs humaines. * Maintenance et Surveillance - Vous assurez la maintenance continue des pipelines d'intégration des données et surveillez les flux de données pour détecter et résoudre rapidement les problèmes. Environnement technologique :***Plateformes : o Cloudera Data Platform o Openshift / Kubernetes***Ingestion : Kafka, Camel, Benthos * Orchestration : Airflow/Argo * Stockage données brutes : Ceph/MinIO, Parquet, Avro, Iceberg * Stockage données structurées : PostgreSQL, MongoDB, Oracle Database * Traitements : Spark, Pyspark, Scala, Java *
☕ java 🕥 Dernière mise à jour il y a 3 semainesExpérience requise
Expérience exigée de 1 An(s)
