Slovník výrazov AI/Bezpečnosť a súkromie

Bezpečnosť a súkromie

adversariálne strojové učenie

Anglický výraz adversarial machine learning

základnéheslo č. 11035 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená adversariálne strojové učenie?

Adversariálne strojové učenie je oblasť skúmajúca, ako protivník cielene ovplyvňuje dáta, model alebo jeho rozhranie a ako sa takým útokom brániť. Taxonómia rozlišuje cieľ, fázu, znalosť systému, schopnosti útočníka a zamýšľaný dopad.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Bezpečnostný tím vytvorí pre klasifikátor scenáre manipulácie vstupu, otravy dát a úniku informácií. Testy vykonáva v izolovanom prostredí a zistenia prevádza na konkrétne kontroly a monitoring.

Overiteľnosť

Odborné zdroje

  1. NIST - Adversarial Machine Learning: A Taxonomy and Terminology of Attacks and Mitigationsdoi.org
  2. MITRE - Adversarial Threat Landscape for AI Systems (ATLAS)atlas.mitre.org

Praktické odpovede

Často kladené otázky

Čo presne znamená adversariálne strojové učenie?

Adversariálne strojové učenie je oblasť skúmajúca, ako protivník cielene ovplyvňuje dáta, model alebo jeho rozhranie a ako sa takým útokom brániť.

Kedy sa adversariálne strojové učenie používa?

Bezpečnostný tím vytvorí pre klasifikátor scenáre manipulácie vstupu, otravy dát a úniku informácií.

Od čoho treba adversariálne strojové učenie odlíšiť?

Robustné ML rieši aj prirodzený šum a posun; adversariálne ML predpokladá aktéra, ktorý sa cielene prispôsobuje obrane.

Ako sa adversariálne strojové učenie kontroluje?

Overí sa realistický model protivníka, oddelený test, adaptívne útoky, viac semien, baseline a účinnosť detekcie.

Aké obmedzenie má adversariálne strojové učenie?

Obrana môže fungovať len proti známemu testu a vytvoriť falošný pocit bezpečia voči adaptívnemu alebo systémovému útoku.