Fiche du terme - Découpage littéral

Terme

Découpage littéral

Définition

Dans le premier traitement effectué par un robot d'indexation, le découpage littéral est exécuté par un analyseur de flux de données qui identifie les séparateurs (ponctuation, espaces blancs) permettant le découpage du flux en chaînes de caractères (ou mots).

Terme générique

• Méthodologie de développement logiciel
  • Glossaire du repérage

Équivalent anglais

• Tokenizer