Data Engineer Spark/Scala

Développement et l’implémentation de solutions Big Data Analytics
Analyse du besoin, étude d’impacts et conception de la solution technique
Conception et modélisation des données au niveau d’un Data Lake (format Parquet, Delta table, )
Construction des pipelines de données pour collecter, transformer et traiter des données dans le Data Lake
Développements de notebooks (ex : Databricks) de traitements avancés des données
Cloud Datawarehousing (tuning, optimisation de traitements et requêtes SQL)
Rédaction de documentation technique (Dossier d’Analyse Technique, release delivery note, .)
Revue de code
Réalisation de tests unitaires
Maintenance corrective et évolutive
Livraison dans un environnement Devops, CI/CD et outils associés