Slovník výrazov AI/RAG a vyhľadávanie

RAG a vyhľadávanie

vyhľadávanie dokumentov

Anglický výraz document retrieval

základnéheslo č. 6035 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená vyhľadávanie dokumentov?

Vyhľadávanie dokumentov vyberá z kolekcie celé dokumenty relevantné k dopytu a zvyčajne ich zoradí. Jednotkou hodnotenia je dokument, aj keď skóre môže vzniknúť z jeho nadpisu, polí alebo segmentov. Relevancia závisí od informačnej potreby, obdobia a používateľského kontextu.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Právny vyhľadávač vráti znenia predpisov platné k zadanému dátumu, nie iba pasáže s rovnakými slovami. Index zachová identifikátor, verziu, jurisdikciu a oprávnenie. Eval posudzuje celé dokumenty a osobitne prípady, keď relevantný dokument používa inú terminológiu.

Overiteľnosť

Odborné zdroje

  1. Manning, Raghavan a Schütze - Introduction to Information Retrievalnlp.stanford.edu
  2. Dense Passage Retrieval for Open-Domain Question Answeringarxiv.org

Praktické odpovede

Často kladené otázky

Ako funguje vyhľadávanie dokumentov?

Dopyt sa porovná s reprezentáciou každého dokumentu priamo alebo cez index a top-k sa zoradí podľa skóre.

Kedy má vyhľadávanie dokumentov praktický význam?

Právny vyhľadávač vráti znenia predpisov platné k zadanému dátumu, nie iba pasáže s rovnakými slovami.

S čím si pojem nezamieňať?

Passage retrieval vracia kratšie úseky; document retrieval hodnotí celý dokument ako výsledkovú jednotku.

Ako sa výsledok kontroluje?

Meria sa recall@k, precision@k, nDCG, pokrytie verzií a schopnosť nájsť dokument podľa známeho identifikátora.

Na čo si dať pozor?

Dlhý dokument môže dostať nepresné agregované skóre a duplikované verzie môžu zaplniť rebríček rovnakým obsahom.