jeton textuel

· fiche TERMIUM Plus

Désignations

français
  • jeton textuel (correct,masculine noun)

    OBS: La segmentation en jetons textuels est utilisée aussi bien dans la phase d'apprentissage automatique que dans la phase de traitement d'une instruction générative.
    OBS: Le nombre de jetons textuels sert à mesurer la taille d'un grand modèle de langage; il permet aussi d'estimer et de facturer le coût de fonctionnement des grands modèles de langage commerciaux.

anglais
  • text token (correct,noun)

    CONT: When a [labelling function (LF)] cannot decide whether a text token is positive or negative, it abstains on labelling the token and marks it as -1.

  • synonyme : token (correct,noun)

Codes : pays ou zone où la désignation a cours (CH, FR, DE, EU = Union européenne, INT = usage international). Une désignation barrée est déconseillée.

Définitions

français
Donnée élémentaire d'un grand modèle de langage, qui est constituée d'une suite de caractères obtenue par la segmentation automatique d'un texte.

Classement

Collections

Domaines

  • Traitement de l'information (Informatique)

API

curl -H "Authorization: Token VOTRE_CLE" \
  "https://opendata.altius-group.ch/language/terminology/api/v1/concepts/termium-1e58b0d52a338b68/"

Données : TERMIUM Plus, Bureau de la traduction, gouvernement du Canada. Licence du gouvernement ouvert – Canada.

Offrez-nous un café Explorer les données