分词器

看看文字如何被切分成词元（token）和 ID。在浏览器中运行，你的文字不会被发送到任何地方。