Mappage automatique et mappage des données de journal dans Analyse de l'intégrité des journaux
Par défaut, le HLA moteur essaie de mapper automatiquement chaque ligne de journal entrante aux balises correctes. Vous pouvez modifier manuellement les résultats de mappage automatique en définissant une fonction JavaScript.
Mappage automatique des lignes de journaux entrantes
Analyse de l'intégrité des journaux Le mappage automatique affecte des échantillons de journal et des métadonnées à trois balises : instance de service, composant et type de source. L’affectation de l’instance de service est basée sur l’instance de service spécifiée dans la configuration de l’entrée de données. Les balises restantes sont attribuées automatiquement.
Par exemple, dans l’exemple de ligne de journal suivant, Analyse de l'intégrité des journaux utilise le champ « source » pour trouver le composant et le type de source.
{"beat":{"version":"6.8","name":"abc3.prd.acme.com","hostname":"abc3.prd.acme.com"},"@timestamp":"2020-08-27T10:12:24.792Z","prospector":{"type":"log"},"message":"**** User null is requesting the following page http://www.acme.com PROPS:{"subcategory1":"home pages","httpStatus":"200","loginLevel":"Anonymous","userAgent":"Mozilla5.0", ("pageUrl":\"http://www.acme.com","host":"abc3.prd.acme.com","@version":"1","source":"/opt/oracle/weblogic/abc/online_store3/logs/online_store3.out","offset":3951550786}
Dans l’exemple, Analyse de l'intégrité des journaux extrait la chaîne « online_store ». Elle analyse les champs suivants s’ils existent dans la ligne de journal : source, chemin, canal, namespace_name, nom, pod_name, source_name et aws_lambda_name. Lorsque les données sont envoyées via Syslog, il analyse également la balise syslog.
- Arrêter l’extraction de données inutiles
- Si une chaîne extraite n’est pas suffisamment descriptive ou contient du texte ou des informations redondants, vous pouvez arrêter l’extraction de ces données consommables. Pour plus d'informations, consultez Arrêter l’extraction des données de journal inutiles dans Analyse de l'intégrité des journaux.
- Garantir l’extraction de données spécifiques
- Vous pouvez vous assurer que Analyse de l'intégrité des journaux extrait les termes spécifiques souhaités. Pour plus d'informations, consultez Extraire des données de journal spécifiques dans Analyse de l'intégrité des journaux.
Mappage des sources d’entrée de données
Vous pouvez modifier manuellement les résultats de mappage automatique en définissant une fonction JavaScript. Le mappage d’entrée de données vous permet d’organiser vos données de journal par instance de service et par zone de disponibilité. Une seule instance de service peut inclure plusieurs composants, et un composant peut recevoir des journaux de nombreux types de sources différents. Une paire instance de service-composant est toutefois unique. Les types de source sont basés sur une structure et un format de journal spécifiques. Les instances et les composants de service sont définis de manière plus large et sont donc principalement utilisés pour le mappage logique.
L’activation du mode Test évite de faire Elasticsearch exploser le stockage avec des exemples de données qui ne sont utilisés que pour perfectionner le mappage des données de journal. Lorsque l’entrée de données est en mode test, Analyse de l'intégrité des journaux ne crée pas les types de sources, les sources ou tout autre objet qu’elle crée dans le flux standard. Il enregistre les données diffusées dans des index temporaires Elasticsearch dédiés qui apparaissent en tant que composants dans la visionneuse de journaux. Lorsque vous publiez le script et quittez le mode Test, ces index temporaires sont supprimés pour minimiser la consommation d’espace de stockage.
| Propriété système | Description | Valeur par défaut |
|---|---|---|
| log_source.sources_warning_limit | Limite d’avertissement pour le nombre de sources créées par entrée de données. | 500 |
| log_source.sources_critical_limit | La limite critique pour le nombre de sources créées par entrée de données. | 600 |
Liaison des données du journal
La liaison de données de journal à des éléments de configuration (CI) dans Base de données de gestion des configurations (CMDB) vous permet de rechercher dans la CMDB des points de terminaison correspondant à un journal. Lorsque vous configurez une entrée de données, vous liez les entrées de journal à une instance de service liée à un CI dans la CMDB. La liaison des entrées de journal, des instances de service et des CI permet au moteur de les corréler pour une utilisation dans l’analyse HLA de la cause première (RCA). Pour plus d'informations, voir Configurer manuellement une Rsyslog entrée Analyse de l'intégrité des journaux de données ou FilebeatWinlogbeat ou Configurer une Elasticsearch entrée de données dans Analyse de l'intégrité des journaux manuellement.