Dans le cadre du renouvellement, du système de mesure des puissants sur le réseau électrique de RTE et du suivi de consommation électrique instantané et prévisionnelle. Ma mission était de concevoir et développer une application multithread, permettant l’extraction des datas d’une BDD oracle vers l’envoie un topic Kafka en utilisant les schèma AVRO.

La principale contrainte était de pouvoir extraire et transmettre en moins d’une seconde, 142 000 lignes réparties dans 142 tables différentes, en historisant les données extraites. Tout en garantissant que les données extraites n’est pas de doublons

Mettre en place les environnements de dev sur des serveurs redHat7 pour le développement de l’application.

Mettre en place la plateforme confluent

Modifier et créer les partitions Oracle de chaque table

Mettre en place un script sh pl/sql, pour l’injection de data, modifier et créer des partitions, qui permet de simuler un chargement de la BDD oracle comme en production.

J’ai dû concevoir et réaliser l'architecture technique de l’application.