Slovník výrazov AI/Spracovanie prirodzeného jazyka

Spracovanie prirodzeného jazyka

rozpoznávanie pomenovaných entít

Anglický výraz named entity recognition

základnéheslo č. 5175 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená rozpoznávanie pomenovaných entít?

Rozpoznávanie pomenovaných entít (NER) vyhľadáva textové zmienky o entitách a označuje ich typ, napríklad osoba, organizácia, miesto, dátum alebo produkt. Predikuje hranice zmienky a triedu, nie jednoznačnú identitu objektu. Kategórie a pravidlá zahrnutia musia byť vopred definované anotačnou schémou.

Skúsenosť a kontext

Ako sa pojem používa v praxi

NER anonymizuje mená v dokumentoch, indexuje firmy v správach alebo pripravuje kandidátov pre prepájanie entít. Tréning a test zahŕňajú vnorené názvy, skratky, skloňovanie a nové entity. Pri súkromí sa výstup nesmie považovať za úplnú ochranu; dopĺňa sa pravidlami a manuálnym auditom.

Overiteľnosť

Odborné zdroje

  1. BERT: Pre-training of Deep Bidirectional Transformersarxiv.org
  2. Entity, Relation, and Event Extraction with Contextualized Span Representationsaclanthology.org

Praktické odpovede

Často kladené otázky

Ako funguje rozpoznávanie pomenovaných entít?

Sekvenčný alebo spanový model vyberá začiatok, koniec a typ každej zmienky z kontextových reprezentácií.

Kedy má rozpoznávanie pomenovaných entít praktický význam?

NER anonymizuje mená v dokumentoch, indexuje firmy v správach alebo pripravuje kandidátov pre prepájanie entít.

S čím si pojem nezamieňať?

Prepájanie entít priraďuje zmienke konkrétny záznam v báze; NER iba nájde zmienku a jej všeobecnú kategóriu.

Ako sa výsledok kontroluje?

Používa sa entity-level precision, recall a F1 s presnou hranicou a výsledky podľa typu a známosti názvu.

Na čo si dať pozor?

Nové mená, preklepy, vnorené entity a rozdielne pravidlá hraníc znižujú prenos medzi doménami.