Formation Construire un pipeline AIOps avec des outils open source

Conception d'une architecture AIOps ouverte

• Vue d'ensemble des composants clés des pipelines AIOps ouverts
• Flux de données depuis l'ingestion jusqu'à l'alerte
• Comparaison des outils et stratégie d'intégration

Collecte et agrégation des données

• Ingestion de données séries temporelles avec Prometheus
• Capture des journaux avec Logstash et Beats
• Normalisation des données pour la corrélation inter-sources

Création de tableaux de bord d'observabilité

• Visualisation des métriques avec Grafana
• Création de tableaux de bord Kibana pour l'analyse des journaux
• Utilisation des requêtes Elasticsearch pour extraire des informations opérationnelles

Détection d'anomalies et prévision d'incidents

• Export des données d'observabilité vers des pipelines Python
• Entraînement de modèles ML pour la détection de valeurs aberrantes et la prévision
• Déploiement de modèles pour l'inférence en direct dans le pipeline d'observabilité

Alertes et automatisation avec des outils ouverts

• Création de règles d'alerte Prometheus et de routage Alertmanager
• Déclenchement de scripts ou de flux de travail API pour la réponse automatique
• Utilisation d'outils d'orchestration open source (par ex. Ansible, Rundeck)

Considérations d'intégration et de scalabilité

• Gestion de l'ingestion à haut volume et de la rétention à long terme
• Sécurité et contrôle d'accès dans les piles open source
• Mise à l'échelle indépendante de chaque couche : ingestion, traitement, alerte

Applications réelles et extensions

• Études de cas : optimisation des performances, prévention des pannes et optimisation des coûts
• Extension des pipelines avec des outils de traçage ou des graphes de services
• Bonnes pratiques pour l'exploitation et la maintenance de l'AIOps en production

Résumé et prochaines étapes