Slovník výrazov AI/Posilňované učenie

Posilňované učenie

imitačné učenie

Anglický výraz imitation learning

špecializovanéheslo č. 12965 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená imitačné učenie?

Imitačné učenie získava politiku alebo model odmeny z ukážok správania experta namiesto priameho skúšania všetkých akcií. Zahŕňa behaviorálne klonovanie, interaktívne zbieranie opráv aj inverzné posilňované učenie.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Robot sa učí základ manipulácie z bezpečných demonštrácií a následne sa testuje pri malých odchýlkach od expertnej trajektórie. Neisté prípady žiadajú nový príklad.

Overiteľnosť

Odborné zdroje

  1. Argall et al. - A Survey of Robot Learning from Demonstrationdoi.org
  2. Ng & Russell - Algorithms for Inverse Reinforcement Learningai.stanford.edu

Praktické odpovede

Často kladené otázky

Čo presne znamená imitačné učenie?

Imitačné učenie získava politiku alebo model odmeny z ukážok správania experta namiesto priameho skúšania všetkých akcií.

Kedy sa imitačné učenie používa?

Robot sa učí základ manipulácie z bezpečných demonštrácií a následne sa testuje pri malých odchýlkach od expertnej trajektórie.

Od čoho treba imitačné učenie odlíšiť?

Supervised learning môže predikovať ľubovoľný label; imitation learning konkrétne reprodukuje rozhodovaciu politiku z demonštrácií.

Ako sa imitačné učenie kontroluje?

Overuje sa pôvod a kvalita ukážok, pokrytie stavov, closed-loop výkon, recovery scenáre, expert gap a bezpečné obmedzenia.

Aké obmedzenie má imitačné učenie?

Politika zdedí chyby a preferencie experta a pri vlastnej odchýlke sa dostane do stavov, ktoré v ukážkach nevidela.