Presná definícia
Čo znamená stratégia dopytovania?
Stratégia dopytovania je pravidlo, ktorým aktívne učenie zoradí alebo vyberie kandidátov na anotáciu. Môže maximalizovať neistotu, nezhodu modelov, očakávanú zmenu parametrov, zníženie chyby alebo kombináciu informatívnosti s reprezentatívnosťou. Stratégia je oddelená od anotátora aj základného modelu a jej prínos sa posudzuje ako krivka kvality voči kumulatívnym nákladom.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Pri obrazovej kontrole sa kandidáti najprv prefiltrujú podľa dostupnosti a potom skórujú neistotou. Aby dávku nezaplnili takmer rovnaké snímky, použije sa diverzitné obmedzenie v priestore reprezentácií. Do skóre sa pridá odhad ceny anotácie a minimálne zastúpenie lokalít. Tím zaznamená poradie, dôvod výberu i odmietnuté prípady; pri hodnotení porovná viac stratégií od rovnakého úvodného súboru.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Čo stratégia hodnotí?
Neoznačených kandidátov spolu so stavom modelu a prípadne cenou anotácie.
Prečo nestačí vybrať top skóre?
Najvyššie položky môžu byť navzájom redundantné.
Môže zohľadniť čas anotátora?
Áno, užitočnosť možno deliť alebo vážiť očakávanými nákladmi.
Je stratégia vždy nezávislá od modelu?
Nie; neistota aj zmena parametrov závisia od jeho výstupov.
Ako porovnať stratégie?
Plochou alebo bodmi na krivke kvalita-počet či cena štítkov.