Tokenize (None)
Il s'agit d'une commande facultative.
Pour pouvez définir Tokenize
sur None
pour arrêter la segmentation de champ. Lorsque Tokenize
est défini sur None
, la règle de grammaire de parsing doit comprendre tout espace ou autre séparateur de jetons dans sa définition.
Pour utiliser cette commande :
- Placez le curseur là où vous voulez insérer la commande.
- Double-cliquez sur %Tokenise(None) dans la liste Commandes.