Red Hat SummitChapitre 11. Alertes de journalisation
11.1. Alertes de journalisation par défaut
Les alertes de journalisation sont installées dans le cadre de l’installation Red Hat OpenShift Logging Operator. Les alertes dépendent des métriques exportées par la collecte de journaux et les backends de stockage de journaux. Ces métriques sont activées si vous avez sélectionné l’option Activer la surveillance de cluster recommandée par l’opérateur sur cet espace de noms lors de l’installation de l’opérateur de journalisation Red Hat OpenShift.
Les alertes de journalisation par défaut sont envoyées à OpenShift Dedicated Monitoring stack Alertmanager dans l’espace de noms openshift-monitoring, sauf si vous avez désactivé l’instance Alertmanager locale.
11.1.1. Accéder à l’interface utilisateur d’alerte dans les perspectives de l’administrateur et du développeur
L’interface utilisateur d’alerte est accessible par le biais de la perspective administrateur et de la perspective Développeur de la console Web dédiée OpenShift.
-
Dans la perspective de l’administrateur, allez à Observer
Alerter. Les trois pages principales de l’interface utilisateur d’alerte dans cette perspective sont les pages de règles d’alerte, de silence et d’alerte.
-
Dans la perspective Développeur, allez dans Observer
<project_name> Alertes. Dans cette perspective, les alertes, les silences et les règles d’alerte sont tous gérés à partir de la page Alertes. Les résultats affichés dans la page Alertes sont spécifiques au projet sélectionné.
Dans la perspective Développeur, vous pouvez sélectionner parmi les projets clés OpenShift Dédicés et définis par l’utilisateur auxquels vous avez accès dans la liste Projet: <project_name>. Cependant, les alertes, les silences et les règles d’alerte relatives aux principaux projets dédiés à OpenShift ne sont pas affichés si vous n’êtes pas connecté en tant qu’administrateur de cluster.
11.1.2. Alerte de collecteur de journalisation
Dans l’enregistrement des versions 5.8 et ultérieures, les alertes suivantes sont générées par l’opérateur de journalisation Red Hat OpenShift. Ces alertes peuvent être affichées dans la console Web OpenShift Dedicated.
| Alerte Nom | Le message | Description | La sévérité |
|---|---|---|---|
| CollectorNodeDown | Le Prometheus n’a pas pu gratter le composant du collecteur de noms/pod pendant plus de 10 m. | Le collecteur ne peut pas être gratté. | Critique |
| CollectorHighErrorRate | la valeur % des enregistrements a entraîné une erreur par composant collecteur d’espace de noms/pod. | les erreurs de composant de collecteur de noms/pods sont élevées. | Critique |
| CollectorVeryHighErrorRate | la valeur % des enregistrements a entraîné une erreur par composant collecteur d’espace de noms/pod. | les erreurs de composant de collecteur de noms/pods sont très élevées. | Critique |
11.1.3. Alertes de collecteur de vecteurs
Dans l’enregistrement des versions 5.7 et ultérieures, les alertes suivantes sont générées par le collecteur de vecteurs. Ces alertes peuvent être affichées dans la console Web OpenShift Dedicated.
| Alerte | Le message | Description | La sévérité |
|---|---|---|---|
|
|
| Le nombre d’erreurs de sortie vectorielles est élevé, par défaut plus de 10 au cours des 15 minutes précédentes. | Avertissement |
|
|
| Le vecteur rapporte que Prometheus ne pouvait pas gratter une instance vectorielle spécifique. | Critique |
|
|
| Le nombre d’erreurs de composants vectoriels est très élevé, par défaut plus de 25 au cours des 15 minutes précédentes. | Critique |
|
|
| Fluentd rapporte que la taille de la file d’attente augmente. | Avertissement |
11.1.4. Alertes Fluentd collector
Les alertes suivantes sont générées par l’ancien collecteur de journaux Fluentd. Ces alertes peuvent être affichées dans la console Web OpenShift Dedicated.
| Alerte | Le message | Description | La sévérité |
|---|---|---|---|
|
|
| Le nombre d’erreurs de sortie FluentD est élevé, par défaut plus de 10 au cours des 15 minutes précédentes. | Avertissement |
|
|
| Fluentd signale que Prometheus ne pouvait pas gratter une instance Fluentd spécifique. | Critique |
|
|
| Fluentd rapporte que la taille de la file d’attente augmente. | Avertissement |
|
|
| Le nombre d’erreurs de sortie FluentD est très élevé, par défaut plus de 25 au cours des 15 minutes précédentes. | Critique |
11.1.5. Elasticsearch règles d’alerte
Ces règles d’alerte sont affichées dans la console Web OpenShift Dedicated.
| Alerte | Description | La sévérité |
|---|---|---|
|
| L’état de santé du cluster a été RED depuis au moins 2 minutes. Le cluster n’accepte pas les écrits, les éclats peuvent manquer, ou le nœud maître n’a pas encore été élu. | Critique |
|
| L’état de santé du cluster a été YELLOW pendant au moins 20 minutes. Certaines répliques de fragments ne sont pas allouées. | Avertissement |
|
| Le cluster devrait être hors de l’espace disque dans les 6 prochaines heures. | Critique |
|
| Le cluster devrait être sorti des descripteurs de fichiers dans l’heure suivante. | Avertissement |
|
| L’utilisation de JVM Heap sur le nœud spécifié est élevée. | Alerte |
|
| Le nœud spécifié a atteint le filigrane bas en raison d’un faible espace disque libre. Les fragments ne peuvent plus être attribués à ce nœud. Il faut envisager d’ajouter plus d’espace disque au nœud. | Infos |
|
| Le nœud spécifié a atteint le filigrane élevé en raison d’un faible espace disque libre. Certains fragments seront réaffectés à différents nœuds si possible. Assurez-vous que plus d’espace disque est ajouté au nœud ou déposez les anciens indices alloués à ce nœud. | Avertissement |
|
| Le nœud spécifié a frappé le filigrane d’inondation en raison d’un faible espace disque libre. Chaque index qui a un fragment alloué sur ce nœud est appliqué un bloc en lecture seule. Le bloc d’index doit être libéré manuellement lorsque l’utilisation du disque tombe sous le filigrane élevé. | Critique |
|
| L’utilisation de JVM Heap sur le nœud spécifié est trop élevée. | Alerte |
|
| Elasticsearch connaît une augmentation des rejets d’écriture sur le nœud spécifié. Ce nœud pourrait ne pas suivre la vitesse d’indexation. | Avertissement |
|
| Le CPU utilisé par le système sur le nœud spécifié est trop élevé. | Alerte |
|
| Le CPU utilisé par Elasticsearch sur le nœud spécifié est trop élevé. | Alerte |
'%20d='M201.5%20305.5c-13.8%200-24.9-11.1-24.9-24.6%200-13.8%2011.1-24.9%2024.9-24.9%2013.6%200%2024.6%2011.1%2024.6%2024.9%200%2013.6-11.1%2024.6-24.6%2024.6zM504%20256c0%20137-111%20248-248%20248S8%20393%208%20256%20119%208%20256%208s248%20111%20248%20248zm-132.3-41.2c-9.4%200-17.7%203.9-23.8%2010-22.4-15.5-52.6-25.5-86.1-26.6l17.4-78.3%2055.4%2012.5c0%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.3%2024.9-24.9s-11.1-24.9-24.9-24.9c-9.7%200-18%205.8-22.1%2013.8l-61.2-13.6c-3-.8-6.1%201.4-6.9%204.4l-19.1%2086.4c-33.2%201.4-63.1%2011.3-85.5%2026.8-6.1-6.4-14.7-10.2-24.1-10.2-34.9%200-46.3%2046.9-14.4%2062.8-1.1%205-1.7%2010.2-1.7%2015.5%200%2052.6%2059.2%2095.2%20132%2095.2%2073.1%200%20132.3-42.6%20132.3-95.2%200-5.3-.6-10.8-1.9-15.8%2031.3-16%2019.8-62.5-14.9-62.5zM302.8%20331c-18.2%2018.2-76.1%2017.9-93.6%200-2.2-2.2-6.1-2.2-8.3%200-2.5%202.5-2.5%206.4%200%208.6%2022.8%2022.8%2087.3%2022.8%20110.2%200%202.5-2.2%202.5-6.1%200-8.6-2.2-2.2-6.1-2.2-8.3%200zm7.7-75c-13.6%200-24.6%2011.1-24.6%2024.9%200%2013.6%2011.1%2024.6%2024.6%2024.6%2013.8%200%2024.9-11.1%2024.9-24.6%200-13.8-11-24.9-24.9-24.9z'/%3e%3c/svg%3e){kind=small}