Ingénieur en données (F/H) / Data engineer (F/M) (H/F)
Description du poste
Nous construisons l'industrie européenne des batteries automobiles ! Notre mission est d'accélérer la transition vers une mobilité durable et abordable pour tous, en réduisant de manière significative les émissions de gaz à effet de serre. Nous recherchons un/une Data Engineer pour assurer la collecte, la transformation et le stockage de données pour notre usine de Billy Berclau Douvrin. Son périmètre d'intervention est centré sur les systèmes applicatifs autour de la gestion et du traitement de donnée et sur les data plateformes telles que Big Data et IoT. Il/elle conduit des extractions de données de différents systèmes d'informations pour les transformer et les charger dans nos infrastructures data. Il/elle garantit leurs disponibilité et assure un accès quantitatif et qualitatif aux différentes sources. Il/elle garantit la qualité des données pour leur utilisation et leur exploitation par les data analysts et les data scientists. Il/elle collaborera, communiquera et consultera nos équipes interfonctionnelles afin de garantir le succès du projet. Missions principales : * Analyser et organiser les données brutes * Construire des systèmes de données et les pipelines * Mettre en place le monitoring de ces flux et les plans de recovery * Évaluer les besoins et les objectifs de l'entreprise en matière de traitement de données * Réaliser des rapports sur les pipelines de données et leurs consommations * Préparer les données pour la modélisation prescriptive et prédictive * Combiner des informations brutes provenant de différentes sources * Explorer les moyens d'améliorer la qualité et la fiabilité des données * Identifier les possibilités d'acquisition de données * Développer des outils et des programmes analytiques * Mettre en place des applications front-end permettant d'exposer les résultats de proof of concept * Collaborer avec les data scientists et les data architects sur plusieurs projets. Savoirs/Savoir-faire : * Un très bon niveau en SQL et Python avec une expérience >3 ans sur ces technos * Maitrises des librairies : Pandas, Streamlit * Un bon niveau en react * La connaissance des technologies suivantes est un plus : Docker, Apache NIFI, AirFlow, HBase, Hive, Spark, Plotly, (ME1) <> Tensor Flow, Scikit-Learn * Concepts de data model/data contract, ETLs, API concept, CI/CD * De l'expérience avec des bases de données Edge et des data platforms databricks * Outils: Nodered, Zeppelin, Git, Azure * Connaissance en machine learning et plus largement en data science. * Expertise technique en matière de modèles de données, de data Mining * La connaissance du protocole MQTT est un plus Expérience : * > 5 ans d'expérience en tant qu'ingénieur de données ou dans un rôle similaire Qualifications : * Un master en informatique ou équivalent * Une certification en data engineering (par exemple IBM Certified Data Engineer) est un plus * Un niveau d'anglais courant est demandé Comportements clé : * Solides compétences analytiques * Capacité à combiner des données provenant de différentes sources * Pragmatique, organisé et structuré * Aime le travail en équipe * Bonne communication orale et écrite * Compétences en matière de collaboration en réseau * Résilient Les "plus" qui font la différence : * L'allemand ou le chinois sont un plus
📈 data analyst 🕥 Dernière mise à jour il y a 5 joursExpérience requise
5 An(s)
