Slovník výrazov AI/Posilňované učenie

Posilňované učenie

inverzné posilňované učenie

Anglický výraz inverse reinforcement learning

špecializovanéheslo č. 12985 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená inverzné posilňované učenie?

Inverzné posilňované učenie odhaduje funkciu odmeny, pod ktorou sú pozorované expertove trajektórie približne optimálne. Následne možno plánovať novú politiku, no odmena nie je jednoznačne identifikovateľná bez dodatočných predpokladov.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Z jázd operátora tím odhaduje kompromis medzi časom a plynulosťou, potom výslednú odmenu testuje na nových trasách a porovnáva viac ekvivalentných vysvetlení.

Overiteľnosť

Odborné zdroje

  1. Ng & Russell - Algorithms for Inverse Reinforcement Learningai.stanford.edu
  2. Argall et al. - A Survey of Robot Learning from Demonstrationdoi.org

Praktické odpovede

Často kladené otázky

Čo presne znamená inverzné posilňované učenie?

Inverzné posilňované učenie odhaduje funkciu odmeny, pod ktorou sú pozorované expertove trajektórie približne optimálne.

Kedy sa inverzné posilňované učenie používa?

Z jázd operátora tím odhaduje kompromis medzi časom a plynulosťou, potom výslednú odmenu testuje na nových trasách a porovnáva viac ekvivalentných vysvetlení.

Od čoho treba inverzné posilňované učenie odlíšiť?

Imitation learning môže kopírovať akcie; inverse RL sa snaží rekonštruovať cieľ, ktorý ich vysvetľuje.

Ako sa inverzné posilňované učenie kontroluje?

Overuje sa model prostredia, racionalita experta, regularizácia odmeny, held-out trajektórie, transfer a identifikovateľnosť.

Aké obmedzenie má inverzné posilňované učenie?

Mnohé odmeny vysvetlia rovnaké správanie a pozorované konanie môže odrážať obmedzenia, nie skutočné preferencie.