Slovník výrazov AI/RAG a vyhľadávanie

RAG a vyhľadávanie

vyhľadávanie s posuvným oknom

Anglický výraz sliding-window retrieval

pokročiléheslo č. 6265 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená vyhľadávanie s posuvným oknom?

Vyhľadávanie s posuvným oknom hodnotí alebo vracia prekrývajúce sa úseky dokumentu vytvorené posunom okna cez text. Umožňuje zachytiť dôkaz pretínajúci pevnú hranicu a niekedy rozšíriť okolie nájdenej pasáže. Krok, veľkosť okna a spôsob zlučovania určujú redundanciu aj cenu.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Prepis porady sa prehľadáva v oknách po 20 vetách s posunom o 10; susedné zásahy sa zlúčia do jedného časového úseku. Eval obsahuje odpovede rozdelené medzi dve okná a sleduje unikátne dôkazy. Tokenový limit sa počíta až po deduplikácii.

Overiteľnosť

Odborné zdroje

  1. Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasksarxiv.org
  2. Lost in the Middle: How Language Models Use Long Contextsaclanthology.org

Praktické odpovede

Často kladené otázky

Ako funguje vyhľadávanie s posuvným oknom?

Algoritmus vytvára okná dĺžky w so skokom s menším alebo rovným w a samostatne ich indexuje či skóruje.

Kedy má vyhľadávanie s posuvným oknom praktický význam?

Prepis porady sa prehľadáva v oknách po 20 vetách s posunom o 10; susedné zásahy sa zlúčia do jedného časového úseku.

S čím si pojem nezamieňať?

Chunk overlap je vlastnosť uložených segmentov; sliding-window retrieval môže okná vytvárať alebo rozširovať až pri dopyte.

Ako sa výsledok kontroluje?

Kontroluje sa recall dôkazov na hraniciach, redundancia, latencia, počet okien a kvalita zlučovania susedov.

Na čo si dať pozor?

Malý krok prudko zväčší index a top-k môžu obsadiť kópie tej istej pasáže na úkor iných zdrojov.