ConceptNet 5: tokenize

Related terms

en tokenization ⁽ⁿ⁾ ➜
en tokenization ➜
en detokenize ^(v) ➜
en retokenize ^(v) ➜
en tokenise ^(v) ➜
en tokenizable ^(a) ➜
en minority ➜
en parse ➜
en token ➜
en tokenize ^(v) ➜
fr parser ➜
en tokenizer ⁽ⁿ⁾ ➜
en tokenizes ^(v) ➜
en tokenizing ^(v) ➜
en untokenized ^(a) ➜

Word forms

en tokenise ➜
en tokenise ^(v) ➜
en tokenize ^(v) ➜
en tokenized ^(v) ➜
en tokenize ^(v) ➜
en tokenizes ^(v) ➜
en tokenizing ➜
en tokenizing ^(v) ➜

Derived terms

Synonyms

ja トークン化 ⁽ⁿ⁾ ➜

Derived from

en token ➜

Context of this term

en computing ➜

Links to other resources

en.wiktionary.org tokenize
fr.wiktionary.org tokenize