Miary rankingowe oceniające etap retrievalu względem oznaczonych istotnych dokumentów.
Ranking metrics that grade the retrieval stage against labelled relevant documents.
Mierzysz, czy wyszukiwarka w twoim systemie podaje potrzebny dokument wśród pierwszych kilku wyników i jak wysoko.
You measure whether the search step in your system puts the needed document among the first few results, and how high.
Gdy asystent odpowiada źle, nie wiadomo, czy zawiódł model, czy po prostu nie dostał właściwego dokumentu.
When an assistant answers badly, you cannot tell whether the model failed or it simply never got the right document.
Ocenia sam etap szukania osobno od pisania odpowiedzi, jak sprawdzenie, czy bibliotekarz podał właściwą książkę, zanim ktoś ją streszcza.
It grades the search step apart from answer writing, like checking the librarian handed over the right book before anyone summarises it.
Na stu pytaniach z oznaczonymi właściwymi stronami instrukcji widzisz, że po zmianie podziału dokumentów potrzebna strona częściej trafia do pierwszej piątki.
On a hundred questions with the correct manual pages marked, you see that after re-splitting the documents the needed page lands in the top five more often.