Expert Kafka

En tant qu’expert / BigData, le candidat sera amené à travailler sur des projets de construction de clusters KAFKA sur le cloud.

Les tâches à assurer dans le cadre projet sont :
- construction des clusters
- sécurisation (mise en place du SSL avec certificats entre tous les composants ,
- mise en place de la supervision soit avec LOGM - soit avec prometheus, graphana, alertmanager et la
- gestion des alertes, et le composant schéma registry kafka, les déploiements, la gestion des schémas et la gouvernance,
- mise en place des pipelines jenkins, pour les divers déploiements, renouvellement certificats...

Le candidat sera également amené à sécuriser des socles KAFKA déjà montés sur le cloud et définir comment réaliser les montées de version kafka pour uniformiser les plateformes.

Connaissance infra KAFKA sur le cloud indispensable.

Livrables
- Dossier d’architecture
- Script d’installation (TERRAFORM) des infrastructures et de KAFKA
- Mise en place de la supervision
- Automatisation des déploiement des objets KAFKA


Technologies
ANSIBLE
BITBUCKET
CLOUD AZURE
CLOUD GCP
ELASTICSEARCH
GIT
JENKINS
KAFKA
RABBITMQ

Environnements linguistique
Anglais

Autres compétences
Connaissances Big DATA
Maitrise TERRAForm, Zookeeper