Presná definícia
Čo znamená slabý dohľad?
Slabý dohľad používa namiesto jednotlivo overených anotácií lacnejšie, ale nepresné signály: heuristiky, pravidlá, existujúce databázy, davové hlasovanie alebo neúplné štítky. Systém môže odhadovať presnosť a závislosti týchto zdrojov a skombinovať ich do pravdepodobnostných označení. Slabý dohľad teda škáluje tvorbu tréningových dát, no neodstraňuje potrebu zlatého validačného súboru.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Pri detekcii reklamných správ odborníci napíšu funkcie, ktoré hlasujú podľa slov, odkazov a metadát. Hlasovania sa uchovajú oddelene, aby sa dali merať konflikty a pokrytie; model označení ich spojí namiesto slepého väčšinového hlasu. Na ručne skontrolovanej vzorke sa overí presnosť jednotlivých pravidiel aj výsledného klasifikátora. Pravidlá sa verziujú, pretože zmena jedného môže preštítkovať veľkú časť korpusu.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Čo môže byť zdrojom dohľadu?
Pravidlo, externá databáza, vzdialený dohľad, dav alebo starší model.
Sú slabé štítky považované za pravdu?
Nie; ich chybovosť a konflikty sú súčasťou problému.
Prečo nestačí spočítať hlasy?
Dve pravidlá môžu kopírovať ten istý signál a predstierať nezávislé potvrdenie.
Načo slúži ručná vzorka?
Na meranie kvality a výber modelu, nie na odvodenie každej etikety.
Čo treba zaznamenávať?
Verzie pravidiel, ich pokrytie, konflikty a pôvod každého hlasovania.