Home›Browse›tokenisering🌐SvenskaEnglishBahasa IndonesiaDeutschFrançaisSvenskaРусский中文日本語EntityQ2438971· pop 5tokeniseringAlso known as tokenisationuppdelning av en textström i bitar för analys eller vidare bearbetningAvailable in 4 languagesDeutschРусскийBahasa Indonesiavia Wikidata sitelinks · CC0Connectionslexical analysisEntity