saneistaa

From Tieteen termipankki
Jump to: navigation, search

saneistaa (Kieliteknologia) Lue koko artikkeli

tokenise (Language_Technology) Juokseva teksti saneistetaan jakamalla se sanakirjahakua taimorfologista analyysia varten soveltuviksi saneksi, jotka on normalisoitu ja puhdistettu taierotettu välimerkeistä. Saneistus voi antaa välimerkit omina saneidenkaltaisina yksiköinään jatkokäsittelylle.
Splitting a runnig text into tokens consisting of words or punctuation.
Lue koko artikkeli

Tarkastele kieliopillista koodausta nuolialas
Kieli
Sanaluokka
Termityyppi
Johdostyyppi
Suku
Alkuperä

Lähdeviittaus tähän sivuun:
Tieteen termipankki 17.09.2019: Nimitys:saneistaa. (Tarkka osoite: https://www.tieteentermipankki.fi/wiki/Nimitys:saneistaa.)