Slovník výrazov AI/Posilňované učenie

Posilňované učenie

stav

Anglický výraz state

základnéheslo č. 12555 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená stav?

Stav je reprezentácia informácie o prostredí, ktorá je pre rozhodovanie dostatočná na predpovedanie dôsledkov budúcich akcií. V MDP má zachytiť všetku relevantnú históriu pre prechody a odmeny.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri regulácii budovy stav zahŕňa teploty, čas, obsadenosť a oneskorenie vykurovania. Tím abláciou overí, či vynechané premenné nezhoršujú predikciu prechodu.

Overiteľnosť

Odborné zdroje

  1. Sutton & Barto - Reinforcement Learning: An Introductionandrew.cmu.edu
  2. OpenAI - Spinning Up in Deep Reinforcement Learningspinningup.openai.com

Praktické odpovede

Často kladené otázky

Čo presne znamená stav?

Stav je reprezentácia informácie o prostredí, ktorá je pre rozhodovanie dostatočná na predpovedanie dôsledkov budúcich akcií.

Kedy sa stav používa?

Pri regulácii budovy stav zahŕňa teploty, čas, obsadenosť a oneskorenie vykurovania.

Od čoho treba stav odlíšiť?

Pozorovanie je to, čo senzor poskytne; state je rozhodovacia veličina a môže byť skrytý alebo odhadovaný.

Ako sa stav kontroluje?

Kontroluje sa Markovova dostatočnosť, časová dostupnosť, škálovanie, oneskorenia, aliasing a citlivosť politiky.

Aké obmedzenie má stav?

Príliš chudobný stav spája odlišné situácie, kým príliš bohatý stav zvyšuje rozmernosť a riziko úniku.