Contexte / Objectifs :
Développement des applications d’ingestion de données et de préparation de données sous HADOOP
- expertise SPARK RDD, SPARK SQL en langages JAVA et SCALA.
Une très bonne connaissance de JAVA est un pré-requis
Maitrise des performances de SPARK sous HADOOP, YARN, HIVE, HDFS, HBASE.
Développer des applications avec SPARK streaming.
DevOps (MAVEN, GIT, JENKINS/NEXUS)
Contexte :
Pour notre plateforme Big Data, développements de briques transverses afin de piloter les différents services qu’elle offre.
Expertises spécifiques :
Développer des applications d’ingestion de données et de préparation de données sous HADOOP