Périmètre & Enjeux projet :
- Migration des données dans Google Cloud Platform
- Évolution au sein d’une équipe Agile
Responsabilités :
- Cadrage des besoins et proposition de solutions techniques
- Développement d'un ETL en python
- Création des jobs Airflow
- Migration des données Hadoop dans Google Cloud Storage
- Création et configuration des VMs dans Compute Engine pour la migration des données de Qlik-sense vers Google Cloud Storage
- Création des vues dans BigQuery pour les équipes marketing
- Création et déploiement des Cloud functions
- Utilisation de Pub/Sub pour les données en temps réel (API de réservations)
- Suivi de production
- Participation aux sprint plannings, rétrospectives et aux Daily meetings
- Rédaction des documents techniques (Installation, exploitation, déploiement) dans Confluence.
Environnement technique : Python, Airflow, Google Cloud Platform (BigQuery, Cloud Storage, Compute Engine, Pub/Sub, AppEngine, Dataflow, Cloud functions ), BitBucket, Gitflow, JIRA, Confluence, Docker, Terraform