Slovník výrazov AI/Bezpečnosť a súkromie

Bezpečnosť a súkromie

bezpečnosť strojového učenia

Anglický výraz machine learning security

základnéheslo č. 11025 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená bezpečnosť strojového učenia?

Bezpečnosť strojového učenia je ochrana ML životného cyklu pred útokmi na dáta, učenie, modelové artefakty, inferenciu a spätnú väzbu. Posudzuje tradičné softvérové riziká aj útoky využívajúce štatistické vlastnosti modelu.

Skúsenosť a kontext

Ako sa pojem používa v praxi

Tím podpisuje datasety a modely, izoluje tréning, obmedzuje predikčné API a sleduje zmeny vstupov a výstupov. Každá verzia má dohľadateľný pôvod a postup bezpečného návratu.

Overiteľnosť

Odborné zdroje

  1. NIST - Adversarial Machine Learning: A Taxonomy and Terminology of Attacks and Mitigationsdoi.org
  2. NIST - Secure Software Development Frameworkcsrc.nist.gov

Praktické odpovede

Často kladené otázky

Čo presne znamená bezpečnosť strojového učenia?

Bezpečnosť strojového učenia je ochrana ML životného cyklu pred útokmi na dáta, učenie, modelové artefakty, inferenciu a spätnú väzbu.

Kedy sa bezpečnosť strojového učenia používa?

Tím podpisuje datasety a modely, izoluje tréning, obmedzuje predikčné API a sleduje zmeny vstupov a výstupov.

Od čoho treba bezpečnosť strojového učenia odlíšiť?

AI security zahŕňa širšie generatívne a agentné systémy; ML security sa sústreďuje na komponenty učené z dát.

Ako sa bezpečnosť strojového učenia kontroluje?

Kontroluje sa pôvod dát a modelu, prístup, reproducibilita, útoky na dôvernosť a integritu, dostupnosť a incidentné cvičenia.

Aké obmedzenie má bezpečnosť strojového učenia?

Presnosť na čistom teste nehovorí nič o správaní pri manipulovaných vstupoch alebo kompromitovanom tréningovom zdroji.