Informations générales

Description du poste

Contrat

Stage

Durée du contrat

6 mois

Description de l'emploi

Entité d'accueil : Intégration et Preproduction

Sujet de stage : Conception d'un module intelligent de supervision et de fiabilisation des pipelines Data/IA Cloudera pour les use cases Crédit Immo et Finance


DESCRIPTION DU PROJET :
Dans le cadre de ce stage, vous serez amené(e) à :
- Analyser les métriques et logs issus de NiFi. Airflow et Cloudera Manager
- Développer un collecteur automatisé des indicateurs de performance et d'état des pipelines
- Concevoir un mécanisme de détection d'anomalies (statistique et/ou machine learning)


COMPETENCES REQUISES :
- Compétences en IT
- Statistique, machine learning


RESULTATS ATTENDUS ET LIVRABLES :
1. Cahier des charges fonctionnel et technique
2. Code source du collecteur, moteur d'analyse et interface de supervision
3. Modèle de détection d'anomalies entraîné et documenté
4. Dashboard opérationnel (NiFi / Airflow / CM)
5. Rapport PFE complet (analyse, conception, résultats, perspectives)
6. Guide d'exploitation et plan d'intégration

Profil

- Étudiant(e) en dernière année de formation Bac+5
- Compétences en IT
- Connaissances en statistique, machine learning
- Sens de l'analyse

Localisation du poste

Lieu d'affectation