GEOZ
让优质内容被 AI 引用
首页
GEO 分析工具
GEO
AI大模型
DeepSeek
llms.txt
schema
RSS
菜单
Entity
分词化
将文本数据分割为计算机易于理解的小块(token)的处理。
术语属性
英文:
Tokenization
作用:
将文本转换为数值数据的前置步骤
相关文章
大语言模型从原理到落地:幻觉与提示注入才是真正的坑