Slovník výrazov AI/Pravdepodobnosť a neistota

Pravdepodobnosť a neistota

Jensenova-Shannonova divergencia

Anglický výraz Jensen-Shannon divergence

pokročiléheslo č. 12315 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená Jensenova-Shannonova divergencia?

Jensenova-Shannonova divergencia je symetrizované a vyhladené porovnanie rozdelení založené na priemere dvoch KL divergencií voči zmesovému rozdeleniu. Je konečná aj pri neprekrývajúcej sa podpore; jej odmocnina tvorí metriku.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Tím porovná rozdelenie tém medzi obdobiami cez JS divergence a bootstrapom odhadne prirodzenú variabilitu. Prah alarmu kalibruje na historických stabilných oknách.

Overiteľnosť

Odborné zdroje

  1. Lin - Divergence Measures Based on the Shannon Entropydoi.org
  2. Kullback & Leibler - On Information and Sufficiencydoi.org

Praktické odpovede

Často kladené otázky

Čo presne znamená Jensenova-Shannonova divergencia?

Jensenova-Shannonova divergencia je symetrizované a vyhladené porovnanie rozdelení založené na priemere dvoch KL divergencií voči zmesovému rozdeleniu.

Kedy sa Jensenova-Shannonova divergencia používa?

Tím porovná rozdelenie tém medzi obdobiami cez JS divergence a bootstrapom odhadne prirodzenú variabilitu.

Od čoho treba Jensenova-Shannonova divergencia odlíšiť?

KL divergence je smerová a môže byť nekonečná; Jensen-Shannon je symetrická a používa spoločnú zmes.

Ako sa Jensenova-Shannonova divergencia kontroluje?

Kontroluje sa váha zmesi, logaritmická báza, binning, vyhladenie, veľkosť vzorky a porovnanie s baseline šumom.

Aké obmedzenie má Jensenova-Shannonova divergencia?

Nízka hodnota agregátu môže zakryť veľký posun malej podskupiny a výsledok závisí od reprezentácie či binov.