Data Engineer Big Data F/H - Support

Métier : Systèmes d'informations/Développement
Type de contrat : Convention de stage
Description du poste :
Rattaché(e) au service BI, au sein de l’équipe Support, vous contribuerez à la migration de notre plateforme de données vers Google Cloud Platform (GCP).
Notre environnement offre une immersion concrète dans les enjeux liés à la gestion de données à grande échelle. Alors que la migration est toujours en cours, nous gérons déjà près de 700 To de données et plus de 350 pipelines. Les données produites sont utilisées quotidiennement par plusieurs milliers de collaborateurs.
Dans ce contexte, nous faisons évoluer nos outils de suivi de production, de supervision et de gestion des logs. Nous souhaitons également mieux suivre l’utilisation des ressources Cloud et les coûts associés, afin d’identifier des pistes d’optimisation.
Accompagné(e) par votre maître de stage, vous serez notamment amené(e) à :
Participer à la refonte des outils de supervision et de suivi de production
Concevoir des tableaux de bord facilitant le suivi de l’activité et le travail des équipes
Améliorer la centralisation, l’analyse et l’exploitation des logs
Suivre l’utilisation des ressources Cloud et analyser les coûts associés
Identifier des pistes d’optimisation des ressources et des traitements
Mettre en place des alertes et des indicateurs utiles au quotidien
Proposer des solutions simples et adaptées aux besoins des utilisateurs
Contribuer à la mise à disposition, à la visualisation et à la valorisation des données
Ce stage vous permettra de développer progressivement une vision globale d’une chaîne data en production : suivi des pipelines, supervision, exploitation des données, analyse des coûts et création de tableaux de bord. Vous travaillerez sur des problématiques concrètes, dans un environnement à fort volume de données, avec un impact direct sur le quotidien de plusieurs milliers de collaborateurs.
Vous êtes en dernière année de Master ou d’école d’ingénieur, avec un intérêt pour le Cloud, la supervision et l’exploitation des données ?
Vous appréciez l’analyse, le développement et le scripting, et vous êtes à l’aise avec des langages tels que Python et SQL ?
Vous souhaitez découvrir ou approfondir vos connaissances sur Google Cloud Platform (GCP), le monitoring, la gestion des logs, la création de dashboards (PowerBI) et les enjeux de maîtrise des coûts Cloud ?
Vous êtes curieux, rigoureux, autonome et disposez d’une bonne capacité d’adaptation ?
Vous aimez comprendre les problématiques des équipes et proposer des solutions concrètes pour améliorer le suivi et le fonctionnement des plateformes ?
Alors, rejoignez-nous !
Ce que nous vous offrons
Des challenges et problématiques complexes à résoudre
Une vision transverse des solutions Data et Cloud à l’échelle industrielle
Un important degré de liberté pour apprendre et développer votre expertise
Une équipe dynamique, initiatrice de progrès pour nos collègues développeurs
Site : LA BARIGOUDE - Avenue Maxwell - 31100 TOULOUSE
Niveau d'études min. requis : Bac + 5 et plus
Langue / Niveau :
Français : 6 - Native
Langue / Niveau :
Anglais : 3 - Intermédiaire / B2