Slovník výrazov AI/Spracovanie prirodzeného jazyka

Spracovanie prirodzeného jazyka

určovanie slovných druhov

Anglický výraz part-of-speech tagging

základnéheslo č. 5115 otázok a odpovedí2 odborné zdroje

Presná definícia

Čo znamená určovanie slovných druhov?

Určovanie slovných druhov priraďuje každému tokenu kategóriu, napríklad podstatné meno, sloveso alebo časticu, podľa jeho tvaru a vetného kontextu. Moderné taggery často predikujú aj jemnejšie morfologické črty. Značka závisí od anotačnej schémy; rovnaký výraz môže mať v rôznych vetách inú kategóriu.

Skúsenosť a kontext

Ako sa pojem používa v praxi

POS značky pomáhajú syntaktickému analyzátoru, vyhľadávaniu vzorov aj jazykovej kontrole. Model sa trénuje na stromovom korpuse s presne uvedenou schémou a hodnotí osobitne na neznámych slovách. Pri migrácii medzi sadami značiek sa mapovanie dokumentuje a ručne kontroluje.

Overiteľnosť

Odborné zdroje

  1. Universal Dependencies - dokumentácia anotácieuniversaldependencies.org
  2. UDPipe 2.0 - analýza viet a morfológieaclanthology.org

Praktické odpovede

Často kladené otázky

Ako funguje určovanie slovných druhov?

Sekvenčný model kombinuje reprezentáciu tokenu s ľavým a pravým kontextom a vyberá značku zo stanoveného inventára.

Kedy má určovanie slovných druhov praktický význam?

POS značky pomáhajú syntaktickému analyzátoru, vyhľadávaniu vzorov aj jazykovej kontrole.

S čím si pojem nezamieňať?

Morfologická analýza môže ponúknuť viac kandidátov a čŕt; POS tagging vyberá kontextovú kategóriu v konkrétnej vete.

Ako sa výsledok kontroluje?

Meria sa presnosť značiek, matica zámen a výsledky podľa slovného druhu, frekvencie a domény.

Na čo si dať pozor?

Nejednoznačnosť, nové slová a rozdielne anotačné konvencie spôsobujú chyby, ktoré sa prenášajú do syntaktickej analýzy.