Analyste développeur Big Data (H/F)

Contexte

Sur une architecture Big Data permettant de collecter les données de l'ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stocké sur une base Exadata.

Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données raffinées du DataLake avec des règles métiers décisionnelles.

Missions

Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes Conception détaillée, rédaction de spécifications fonctionnelles générales et détaillées

Développements SPARK / SCALA

Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration

Résolution des anomalies pendant les phases d'intégration fonctionnelle et de recette utilisateur

Packaging et déploiement en pre-production et production

Optimisation des traitements afin de garantir la qualité de service standards du DWG

Mise en œuvre des solutions industrielles et de réentrance permettant une reprise optimum des traitements en cas d'incident en production

Mise en service et accompagnement au déploiement

Suivi des environnements

Le consultant devra travailler en étroite collaboration avec le Chef de Projet, responsable du lot et l'équipe de développement du Programme Outils & Environnement

GitLab

Oracle

Apache MESOS (souhaité)

Technologies SPARK & SCALA (>5 ans d'expérience requise)

Conditions de travail

Localisation : Paris

Description du profil

Exigences

1. Une expérience >5 ans sur des technologies SPARK & SCALA est nécessaire
2. Une connaissance de GitLab et d' Oracle est nécessaire
3. Une connaissance d' Apache MESOS est souhaitée
4. Une connaissance de contexte technologique similaire est un plus