Red Hat SummitChapitre 11. Alertes de journalisation
11.1. Alertes de journalisation par défaut
Les alertes de journalisation sont installées dans le cadre de l’installation Red Hat OpenShift Logging Operator. Les alertes dépendent des métriques exportées par la collecte de journaux et les backends de stockage de journaux. Ces métriques sont activées si vous avez sélectionné l’option Activer la surveillance de cluster recommandée par l’opérateur sur cet espace de noms lors de l’installation de l’opérateur de journalisation Red Hat OpenShift.
Les alertes de journalisation par défaut sont envoyées au service Red Hat OpenShift sur la pile de surveillance AWS Alertmanager dans l’espace de noms de surveillance openshift, à moins que vous n’ayez désactivé l’instance Alertmanager locale.
11.1.1. Accéder à l’interface utilisateur d’alerte du point de vue de l’administrateur
11.1.2. Accéder à l’interface utilisateur d’alerte du point de vue du développeur
L’interface utilisateur d’alerte est accessible via la perspective Développeur du Red Hat OpenShift Service sur la console web AWS.
-
Du point de vue de l’administrateur, allez à Observer
Alerter. Les trois pages principales de l’interface utilisateur d’alerte dans cette perspective sont les pages de règles d’alerte, de silence et d’alerte.
- Du point de vue Développeur, allez à Observer et allez à l’onglet Alertes.
- Choisissez le projet pour lequel vous souhaitez gérer les alertes dans la liste Projet:
Dans cette perspective, les alertes, les silences et les règles d’alerte sont tous gérés à partir de l’onglet Alertes. Les résultats affichés dans l’onglet Alertes sont spécifiques au projet sélectionné.
Dans la perspective Développeur, vous pouvez sélectionner à partir du service Core Red Hat OpenShift sur AWS et les projets définis par l’utilisateur auxquels vous avez accès dans la liste Projet: <project_name>. Cependant, les alertes, les silences et les règles d’alerte relatives au service Core Red Hat OpenShift sur les projets AWS ne sont pas affichés si vous n’êtes pas connecté en tant qu’administrateur de cluster.
11.1.3. Alerte de collecteur de journalisation
Dans l’enregistrement des versions 5.8 et ultérieures, les alertes suivantes sont générées par l’opérateur de journalisation Red Hat OpenShift. Ces alertes sont affichées dans le service OpenShift Red Hat sur la console web AWS.
| Alerte Nom | Le message | Description | La sévérité |
|---|---|---|---|
| CollectorNodeDown | Le Prometheus n’a pas pu gratter le composant du collecteur de noms/pod pendant plus de 10 m. | Le collecteur ne peut pas être gratté. | Critique |
| CollectorHighErrorRate | la valeur % des enregistrements a entraîné une erreur par composant collecteur d’espace de noms/pod. | les erreurs de composant de collecteur de noms/pods sont élevées. | Critique |
| CollectorVeryHighErrorRate | la valeur % des enregistrements a entraîné une erreur par composant collecteur d’espace de noms/pod. | les erreurs de composant de collecteur de noms/pods sont très élevées. | Critique |
11.1.4. Alertes de collecteur de vecteurs
Dans l’enregistrement des versions 5.7 et ultérieures, les alertes suivantes sont générées par le collecteur de vecteurs. Ces alertes sont affichées dans le service OpenShift Red Hat sur la console web AWS.
| Alerte | Le message | Description | La sévérité |
|---|---|---|---|
|
|
| Le nombre d’erreurs de sortie vectorielles est élevé, par défaut plus de 10 au cours des 15 minutes précédentes. | Avertissement |
|
|
| Le vecteur rapporte que Prometheus ne pouvait pas gratter une instance vectorielle spécifique. | Critique |
|
|
| Le nombre d’erreurs de composants vectoriels est très élevé, par défaut plus de 25 au cours des 15 minutes précédentes. | Critique |
|
|
| Fluentd rapporte que la taille de la file d’attente augmente. | Avertissement |
11.1.5. Alertes Fluentd collector
Les alertes suivantes sont générées par l’ancien collecteur de journaux Fluentd. Ces alertes sont affichées dans le service OpenShift Red Hat sur la console web AWS.
| Alerte | Le message | Description | La sévérité |
|---|---|---|---|
|
|
| Le nombre d’erreurs de sortie FluentD est élevé, par défaut plus de 10 au cours des 15 minutes précédentes. | Avertissement |
|
|
| Fluentd signale que Prometheus ne pouvait pas gratter une instance Fluentd spécifique. | Critique |
|
|
| Fluentd rapporte que la taille de la file d’attente augmente. | Avertissement |
|
|
| Le nombre d’erreurs de sortie FluentD est très élevé, par défaut plus de 25 au cours des 15 minutes précédentes. | Critique |
11.1.6. Elasticsearch règles d’alerte
Ces règles d’alerte sont affichées dans le Service OpenShift Red Hat sur la console web AWS.
| Alerte | Description | La sévérité |
|---|---|---|
|
| L’état de santé du cluster a été RED depuis au moins 2 minutes. Le cluster n’accepte pas les écrits, les éclats peuvent manquer, ou le nœud maître n’a pas encore été élu. | Critique |
|
| L’état de santé du cluster a été YELLOW pendant au moins 20 minutes. Certaines répliques de fragments ne sont pas allouées. | Avertissement |
|
| Le cluster devrait être hors de l’espace disque dans les 6 prochaines heures. | Critique |
|
| Le cluster devrait être sorti des descripteurs de fichiers dans l’heure suivante. | Avertissement |
|
| L’utilisation de JVM Heap sur le nœud spécifié est élevée. | Alerte |
|
| Le nœud spécifié a atteint le filigrane bas en raison d’un faible espace disque libre. Les fragments ne peuvent plus être attribués à ce nœud. Il faut envisager d’ajouter plus d’espace disque au nœud. | Infos |
|
| Le nœud spécifié a atteint le filigrane élevé en raison d’un faible espace disque libre. Certains fragments seront réaffectés à différents nœuds si possible. Assurez-vous que plus d’espace disque est ajouté au nœud ou déposez les anciens indices alloués à ce nœud. | Avertissement |
|
| Le nœud spécifié a frappé le filigrane d’inondation en raison d’un faible espace disque libre. Chaque index qui a un fragment alloué sur ce nœud est appliqué un bloc en lecture seule. Le bloc d’index doit être libéré manuellement lorsque l’utilisation du disque tombe sous le filigrane élevé. | Critique |
|
| L’utilisation de JVM Heap sur le nœud spécifié est trop élevée. | Alerte |
|
| Elasticsearch connaît une augmentation des rejets d’écriture sur le nœud spécifié. Ce nœud pourrait ne pas suivre la vitesse d’indexation. | Avertissement |
|
| Le CPU utilisé par le système sur le nœud spécifié est trop élevé. | Alerte |
|
| Le CPU utilisé par Elasticsearch sur le nœud spécifié est trop élevé. | Alerte |
'%20d='M201.5%20305.5c-13.8%200-24.9-11.1-24.9-24.6%200-13.8%2011.1-24.9%2024.9-24.9%2013.6%200%2024.6%2011.1%2024.6%2024.9%200%2013.6-11.1%2024.6-24.6%2024.6zM504%20256c0%20137-111%20248-248%20248S8%20393%208%20256%20119%208%20256%208s248%20111%20248%20248zm-132.3-41.2c-9.4%200-17.7%203.9-23.8%2010-22.4-15.5-52.6-25.5-86.1-26.6l17.4-78.3%2055.4%2012.5c0%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.3%2024.9-24.9s-11.1-24.9-24.9-24.9c-9.7%200-18%205.8-22.1%2013.8l-61.2-13.6c-3-.8-6.1%201.4-6.9%204.4l-19.1%2086.4c-33.2%201.4-63.1%2011.3-85.5%2026.8-6.1-6.4-14.7-10.2-24.1-10.2-34.9%200-46.3%2046.9-14.4%2062.8-1.1%205-1.7%2010.2-1.7%2015.5%200%2052.6%2059.2%2095.2%20132%2095.2%2073.1%200%20132.3-42.6%20132.3-95.2%200-5.3-.6-10.8-1.9-15.8%2031.3-16%2019.8-62.5-14.9-62.5zM302.8%20331c-18.2%2018.2-76.1%2017.9-93.6%200-2.2-2.2-6.1-2.2-8.3%200-2.5%202.5-2.5%206.4%200%208.6%2022.8%2022.8%2087.3%2022.8%20110.2%200%202.5-2.2%202.5-6.1%200-8.6-2.2-2.2-6.1-2.2-8.3%200zm7.7-75c-13.6%200-24.6%2011.1-24.6%2024.9%200%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.1%2024.9-24.6%200-13.8-11-24.9-24.9-24.9z'/%3e%3c/svg%3e){kind=small}