Data Engineer ELK (HA-34118778) Paris, France
| Salaire: | compétitif |
Sujet : le monitoring IT a besoind’une vision transversaleconsolidée
- Se doter d’un monitoring de bout en bout dansunenvironnementhybridecomplexe
- Corrélationdes logs, métriquesetde la performance applicative
- Rapprochermétrologie IT etmétrologieorientéeMétiers
- Partager un vision factuelle des niveaux de services
Enjeux : traiter un gros volume de métriques provenant de plusieurs sources de monitoring
- Compétences ELK
EnvironnementElasticsearch
- Installation d’un cluster Elasticsearch
- Installation et configuration Logstash
- Analyse du dimensionnement global/nombre de nodes et shards
- Déploiementdes pipelines d’ ingestion Logstash
- Gestion de la sécurité des accès (RBAC)
Standardisation des logs :
- Analyse de la qualitédes logs par projet
- Uniformisation de la structure des logs
- Découpage via grok / extraction des champs
- Enrichissement des logs : env, projet et application
- Analyse volumétrie des logs : nb de log/s => compression des logs
- Exploitation des logs
- Développementdescapacitésprédictivesdes incidents et augmentation deprécisiond’alertes
- DéfinitiondesKPIde performance etdecapacité
- Création des dashboards et visualisation des données
Livrables
- Installation/déploiement cluster sécurisé
- Pipeline d' ingestion et collecte (extraction logstash)
- Dashboards Kibana