Data Engineer H/F

FRG Consulting recrute pour l'un de ses clients, un acteur majeur du secteur immobilier basé au cœur de Lyon, un Data Engineer H/D compétent pour renforcer son équipe dynamique. L'entreprise offre un environnement de travail stimulant, des opportunités de croissance professionnelle et la possibilité de contribuer à des projets innovants dans le domaine de l'immobilier.
Responsabilités: En tant que Data Engineer, vous jouerez un rôle clé dans la conception, le développement et la maintenance des infrastructures de données. Vous collaborerez étroitement avec les équipes métier pour comprendre leurs besoins, et utiliserez les technologies suivantes :
Concevoir, développer et maintenir des pipelines de données performants à l'aide de process engines tels que Spark, Hadoop et Apache Airflow.
Mettre en œuvre des solutions ETL avec un outil tel que Talend pour assurer la fiabilité des flux de données.
Utiliser les langages de programmation SQL et Python pour le traitement et l'analyse des données.
Exploiter les bases de données SQL/NoSQL, notamment PostGreSQL, et déployer des solutions ELK (Elasticsearch, Logstash, Kibana) pour l'analyse des logs.
Travailler avec des technologies Big Data telles que Hadoop, Spark et Hive pour gérer et analyser de grandes quantités de données.
Collaborer avec les services Cloud, en particulier Azure, AWS ou Cloud Souverain (OVH Cloud), en mettant en œuvre des notions de FinOps pour optimiser les coûts.
Mettre en place la conteneurisation et l'orchestration avec Docker et Kubernetes.
Utiliser des outils de développement tels que Jupyter pour la création et le partage de notebooks interactifs.
Participer à l'intégration continue avec Git et Jenkins.
Travailler selon les méthodes agiles, notamment Scrum et Kanban, pour assurer une collaboration efficace au sein de l'équipe.
Qualifications requises:
Diplôme en informatique, génie logiciel, sciences des données ou domaine connexe.
Expérience pratique avec les technologies mentionnées ci-dessus.
Compétences approfondies en SQL, Python, DBT, et expérience avec un ETL tel que Talend.
Connaissance des bases de données SQL/NoSQL, des outils ELK, et des technologies Big Data (Hadoop, Spark, Hive).
Expérience dans le déploiement sur des fournisseurs de cloud tels que Azure, AWS ou Cloud Souverain (OVH Cloud), avec des notions de FinOps.
Maîtrise de la conteneurisation et de l'orchestration avec Docker et Kubernetes.
Utilisation d'outils de développement tels que Jupyter.
Expérience de l'intégration continue avec Git et Jenkins.
Familiarité avec les méthodologies agiles, notamment Scrum et Kanban.
Avantages:
Environnement de travail collaboratif et dynamique.
Opportunités de formation continue.
Possibilité de contribuer à des projets innovants dans le secteur de l'immobilier.
Croissance professionnelle au sein d'une entreprise en pleine expansion.