Slovník výrazov AI/Bezpečnosť a súkromie

Bezpečnosť a súkromie

inverzia modelu

Anglický výraz model inversion

základnéheslo č. 11145 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená inverzia modelu?

Inverzia modelu je útok, ktorý z výstupov alebo parametrov modelu rekonštruuje informáciu o vstupoch, triednych prototypoch alebo citlivých vlastnostiach tréningových dát. Rekonštrukcia nemusí byť presnou kópiou konkrétneho záznamu, aby predstavovala riziko.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Pri biometrickom modeli tím testuje, či z embeddingu alebo skóre možno vytvoriť vstup, ktorý odhalí vzhľadové črty alebo sa znovu prijme. Obmedzí výstupy a chráni šablóny ako citlivé údaje.

Overiteľnosť

Odborné zdroje

  1. Fredrikson et al. - Model Inversion Attacks that Exploit Confidence Informationdoi.org
  2. NIST - Adversarial Machine Learning: A Taxonomy and Terminology of Attacks and Mitigationsdoi.org

Praktické odpovede

Často kladené otázky

Čo presne znamená inverzia modelu?

Inverzia modelu je útok, ktorý z výstupov alebo parametrov modelu rekonštruuje informáciu o vstupoch, triednych prototypoch alebo citlivých vlastnostiach tréningových dát.

Kedy sa inverzia modelu používa?

Pri biometrickom modeli tím testuje, či z embeddingu alebo skóre možno vytvoriť vstup, ktorý odhalí vzhľadové črty alebo sa znovu prijme.

Od čoho treba inverzia modelu odlíšiť?

Data reconstruction môže využívať akýkoľvek únik; model inversion špecificky používa správanie alebo parametre modelu.

Ako sa inverzia modelu kontroluje?

Overuje sa podobnosť so skutočnými údajmi, úspech na nevidených osobách, baseline, počet dotazov a citlivosť výstupných polí.

Aké obmedzenie má inverzia modelu?

Vizuálne presvedčivý výsledok nemusí patriť konkrétnemu človeku, preto hodnotenie nesmie zamieňať prototyp s identitou.