Presná definícia
Čo znamená model sveta?
Model sveta je naučený alebo navrhnutý model, ktorý z aktuálneho stavu a akcie predikuje ďalší stav, pozorovanie, odmenu alebo ich rozdelenie. Agent ho používa na predstavované rollouty, plánovanie alebo učenie reprezentácie.
Skúsenosť a kontext
Ako sa pojem používa v praxi
Robot sa z logov naučí latentnú dynamiku a pred vykonaním simuluje kandidátne akcie. Plánovač penalizuje neisté rollouty mimo pokrytia tréningových dát.
Overiteľnosť
Odborné zdroje
Praktické odpovede
Často kladené otázky
Čo presne znamená model sveta?
Model sveta je naučený alebo navrhnutý model, ktorý z aktuálneho stavu a akcie predikuje ďalší stav, pozorovanie, odmenu alebo ich rozdelenie.
Kedy sa model sveta používa?
Robot sa z logov naučí latentnú dynamiku a pred vykonaním simuluje kandidátne akcie.
Od čoho treba model sveta odlíšiť?
Policy mapuje stav na akciu; world model predpovedá, ako sa prostredie po akcii zmení.
Ako sa model sveta kontroluje?
Kontroluje sa multi-step error, calibration, compounding drift, action conditioning, OOD detection, consistency a closed-loop planning.
Aké obmedzenie má model sveta?
Malá jednokroková chyba sa pri dlhom imaginovanom rolloute násobí a plánovač môže cielene využiť chybu modelu.