Entity

分词器 (Tokenizer)

将文本拆分为令牌的算法或工具，是 LLM 输入输出转换的桥梁。