Slovník výrazov AI/Posilňované učenie

Posilňované učenie

klonovanie správania

Anglický výraz behavioral cloning

špecializovanéheslo č. 12975 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená klonovanie správania?

Klonovanie správania je imitačné učenie formulované ako učenie s učiteľom: z dvojíc pozorovanie-akcia odhaduje politiku experta. Optimalizuje chybu jednotlivých rozhodnutí, nie priamo dlhodobú návratnosť v uzavretej slučke.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Tím rozdelí demonštrácie podľa operátora a scenára, nie po snímkach. Okrem validačnej presnosti testuje, či robot dokáže zotaviť sa z malých odchýlok.

Overiteľnosť

Odborné zdroje

  1. Argall et al. - A Survey of Robot Learning from Demonstrationdoi.org
  2. Sutton & Barto - Reinforcement Learning: An Introductionandrew.cmu.edu

Praktické odpovede

Často kladené otázky

Čo presne znamená klonovanie správania?

Klonovanie správania je imitačné učenie formulované ako učenie s učiteľom: z dvojíc pozorovanie-akcia odhaduje politiku experta.

Kedy sa klonovanie správania používa?

Tím rozdelí demonštrácie podľa operátora a scenára, nie po snímkach.

Od čoho treba klonovanie správania odlíšiť?

Inverse RL odhaduje skrytú odmenu; behavioral cloning priamo mapuje stav alebo pozorovanie na akciu.

Ako sa klonovanie správania kontroluje?

Kontroluje sa leakage medzi trajektóriami, nerovnováha akcií, closed-loop rollout, covariate shift, kalibrácia a expert baseline.

Aké obmedzenie má klonovanie správania?

Malé chyby sa počas rolloutu kumulujú a vedú do stavov mimo demonštračnej distribúcie.