Slovník výrazov AI/Multimodálna AI

Multimodálna AI

senzorová fúzia

Anglický výraz sensor fusion

základnéheslo č. 8195 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená senzorová fúzia?

Senzorová fúzia kombinuje merania z fyzických senzorov s rozdielnou presnosťou, frekvenciou alebo zorným poľom, aby odhadla stav prostredia spoľahlivejšie než jeden senzor. Okrem neurónovej fúzie zahŕňa kalibráciu, časovú synchronizáciu a modelovanie neistoty.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Autonómny vozík spája kameru, lidar a odometriu pri lokalizácii v sklade. Systém eviduje časové pečiatky a kovarianciu, testuje zakrytie kamery aj odrazy lidaru a pri nekonzistentných meraniach zníži rýchlosť. Bezpečnostný limit je nezávislý od ML odhadu.

Overiteľnosť

Odborné zdroje

  1. Li et al. - Multimodal Alignment and Fusion: A Surveyarxiv.org
  2. Baltrušaitis et al. - Multimodal Machine Learning: A Survey and Taxonomyarxiv.org

Praktické odpovede

Často kladené otázky

Ako funguje senzorová fúzia?

Merania sa transformujú do spoločnej súradnicovej a časovej bázy a filter alebo naučený model ich váži podľa neistoty a kontextu.

Kedy má senzorová fúzia praktický význam?

Autonómny vozík spája kameru, lidar a odometriu pri lokalizácii v sklade.

S čím si pojem nezamieňať?

Multimodálna fúzia je širšia a môže spájať jazyk s obrazom; sensor fusion sa viaže na merania fyzických veličín a ich kalibráciu.

Ako sa výsledok kontroluje?

Overuje sa chyba odhadu, kalibrácia neistoty, synchronizácia, výpadky senzorov, outlier rejection, latencia a bezpečnostné scenáre.

Na čo si dať pozor?

Spoločná chyba kalibrácie skreslí všetky merania rovnakým smerom a model môže preceniť redundantné senzory ako nezávislé dôkazy.