Slovník výrazov AI/Posilňované učenie

Posilňované učenie

akcia

Anglický výraz action

základnéheslo č. 12565 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená akcia?

Akcia je voľba agenta, ktorou ovplyvní prechod prostredia alebo získanie informácie. Akčný priestor môže byť diskrétny, spojitý, hierarchický či obmedzený a musí zodpovedať skutočne vykonateľným zásahom.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri robotickom ramene akcia určuje bezpečne ohraničený cieľ rýchlosti, nie priamy neobmedzený prúd motora. Ovládač overí limity pred vykonaním.

Overiteľnosť

Odborné zdroje

  1. Sutton & Barto - Reinforcement Learning: An Introductionandrew.cmu.edu
  2. OpenAI - Spinning Up in Deep Reinforcement Learningspinningup.openai.com

Praktické odpovede

Často kladené otázky

Čo presne znamená akcia?

Akcia je voľba agenta, ktorou ovplyvní prechod prostredia alebo získanie informácie.

Kedy sa akcia používa?

Pri robotickom ramene akcia určuje bezpečne ohraničený cieľ rýchlosti, nie priamy neobmedzený prúd motora.

Od čoho treba akcia odlíšiť?

Predikcia iba odhaduje výsledok; action je zásah, za ktorého následky nesie rozhodovací systém.

Ako sa akcia kontroluje?

Overuje sa rozsah, jednotky, frekvencia, maskovanie neplatných volieb, oneskorenie aktuátora a bezpečnostný filter.

Aké obmedzenie má akcia?

Nerealistický akčný priestor vedie k politike, ktorú nemožno nasadiť alebo ktorá využíva chyby simulácie.