中文

English Bahasa Indonesia Deutsch Français Svenska Русский 中文日本語

EntityQ2438971· pop 5

标记化

Sign in to save

Also known as tokenisation

将文本流分块以便分析和后续处理

Wikidata facts

Subclass of: information processing

Show 1 more fact

facet of: compiler construction

via Wikidata · CC0

Available in 4 languages

via Wikidata sitelinks · CC0