Nous recherchons un Data Engineer Sénior H/F avec une forte expertise sur Azure, Databricks, Spark, Scala.
Développement et l’implémentation de solutions Big Data Analytics
Analyse du besoin, étude d’impacts et conception de la solution technique
Conception et modélisation des données au niveau d’un Data Lake (format Parquet, Delta table, )
Construction des pipelines de données pour collecter, transformer et traiter des données dans le Data Lake
Développements de notebooks (ex : Databricks) de traitements avancés des données
Cloud Datawarehousing (tuning, optimisation de traitements et requêtes SQL)
Rédaction de documentation technique (Dossier d’Analyse Technique, release delivery note, .)
Revue de code
Réalisation de tests unitaires
Maintenance corrective et évolutive
Livraison dans un environnement Devops, CI/CD et outils associés
Compétences techniques requises
Expérience Dataminimum 5 ans
Azure minimum 3 ans
Expérience architecture Lakehouseminimum 2 ans
Databricksminimum 5 ans
Sparkminimum 5 ans
Scalaminimum 5 ans
Maitrise de CI/CD, Azure DevOpsminimum 3 ans
Connaissance des outils Agile (JIRA) et ayant déjà travaillé en mode Agile minimum 1 an
4 - Aptitudes personnelles
Force de proposition et aptitude à partager son savoir auprès des membres de l’équipe.
Rigueur, réactivité, bon relationnel, aisance rédactionnelle