Parsowanie logów do szablonów zdarzeń

Automated log parsing · id logparsing · aliases: log parsing, log template extraction, LLM-based log parsing, structured log extraction, parsowanie logów

Automatyczne rozbijanie surowych komunikatów logów na stały szablon zdarzenia i zmienne parametry, jako pierwszy krok wykrywania anomalii i diagnostyki.

Automatically splitting raw log messages into a fixed event template and variable parameters, as the first step in anomaly detection and diagnostics.

In one sentence

Porządkowanie milionów linijek z dzienników systemów w kilka setek powtarzających się typów zdarzeń.

Sorting millions of lines from system journals into a few hundred recurring kinds of events.

Problem it solves

Dzienniki systemów są ogromne i nieuporządkowane, a ręcznie pisane wzorce psują się przy każdej aktualizacji oprogramowania.

System journals are huge and messy, and hand-written patterns break with every software update.

What it does

Jak segregowanie poczty do przegródek według wzoru listu: treść wzoru się powtarza, zmieniają się tylko nazwiska i kwoty.

Like sorting mail into pigeonholes by letter template: the template repeats, only names and amounts change.

Everyday example

Po awarii aplikacji administrator zamiast przewijać dziennik widzi tabelę: ten typ błędu pojawił się dziś tysiąc razy, a wczoraj ani razu.

After an app failure, instead of scrolling the journal the admin sees a table: this error type appeared a thousand times today and never yesterday.

This concerns you if you…

Sources