segmenteur

Désignations

français	segmenteur (correct,masculine noun) CONT: En traitement automatique de la langue naturelle, le segmenteur réalise la segmentation d’un texte en une liste de mots, une liste de segments ou de parties de mots (ou symboles), ou encore une suite de caractères.
anglais	tokenizer (correct)

Codes : pays ou zone où la désignation a cours (CH, FR, DE, EU = Union européenne, INT = usage international). Une désignation barrée est déconseillée.

Définitions

anglais: A software program that … determines boundaries for individual tokens [such as words, numbers or punctuation] in text.

Classement

Collections

Sciences humaines humanities

Domaines

Lexicologie, lexicographie et terminologie

API

curl -H "Authorization: Token VOTRE_CLE" \
  "https://opendata.altius-group.ch/language/terminology/api/v1/concepts/termium-121ffa05dc2971b9/"

Données : TERMIUM Plus, Bureau de la traduction, gouvernement du Canada. Licence du gouvernement ouvert – Canada.