Dzielenie dokumentów

Document chunking · id chunking

Cięcie dokumentów na fragmenty do indeksu, najlepiej według struktury i z metadanymi.

Cutting documents into indexable pieces, preferably by structure and with metadata.

In one sentence

To dzielenie dokumentów na mniejsze fragmenty, które można osobno odnaleźć i podać modelowi.

This splits documents into smaller passages that can be found individually and given to a model.

Problem it solves

Potrzebna odpowiedź ginie w długim dokumencie, a przekazywanie całego tekstu zajmuje miejsce i zwiększa koszt.

The answer you need is buried in a long document, while sending the whole text takes space and costs more.

What it does

Może dzielić tekst według nagłówków i zachowywać informację, z którego dokumentu oraz miejsca pochodzi każdy fragment.

It can split text at headings and keep a record of the document and location each passage came from.

Everyday example

Pytasz o konserwację pralki, a asystent otrzymuje rozdział o czyszczeniu filtra z długiej instrukcji obsługi.

You ask about washing machine maintenance, and the assistant receives the filter cleaning section from a long manual.

This concerns you if you…

Examples

Related topics

Sources