Développeur Big Data – Spark-Cassandra-Hadoop

La mission se déroulera au sein de la Direction des Systèmes d’Information / Direction de l’ingénierie logicielle / Développements Digitaux.

Au sein de l’équipe agile « Monitoring », le profil recherché s’intègrera dans le cadre du projet « Proof Of Play » destiné à rapporter les preuves d’affichage des campagnes diffusées sur les 15 000 mobiliers digitaux à travers 40 filiales dans le monde.

Voici les principales tâches relatives à la mission :
- Elle/Il participe à la conception et au chiffrage des user ou « technical stories » à implémenter,
- Elle/Il code les fonctionnalités et les tests unitaires associés dans le respect des normes, de l’ergonomie et des bonnes pratiques d’ingénierie logicielle en vigueur chez JCDecaux,
- Elle/Il participe à l’installation, au tuning et à la bonne exploitation de la plateforme « Big Data » du projet.
Paris - 9ème arrondissement
Environnement technique :
- Linux CentOS sur Amazon
- Spark 2.x & Hadoop 2.x
- Cassandra 3.x
- Kafka 0.10.x
- Zeppelin et PowerBI
- Volumétrie de milliers de mobiliers communicants
Compétences techniques requises (obligatoires) :
- Conception et réalisation de jobs Spark,
- Programmation en Scala et/ou Java,
- Utilisation d’un cluster de Cassandra et de Hadoop,
- Build des fichiers jars avec une IDE [IntellIJ ou Eclipse] et les déployer dans un cluster [AWS, GCP, OVH, ...]
- Expérience réussie dans la manipulation de grosses volumétries de données
- Bonnes connaissances des commandes des systèmes Linux
- Anglais technique (écrit au minimum)
Compétences appréciées (clairement un plus) :
- Installation et tuning d’un cluster Cassandra et/ou Hadoop
- Connaissances sur Apache Kafka et les concepts de partitions, shards,
- Notions de machine learning
- Connaissance de PowerBI, Zeppelin, et les autres outils de « notebooks » et de « reporting »
- Expérience en milieu Agile
- Intégration continue (Jenkins)
Qualités humaines recherchées :
- Autonomie
- Rigueur
- Dynamisme et curiosité
- Sens de la communication
IT