Entity
Chunk切分
将原始文档按照一定策略切分成适合检索和生成的小块(Chunk),是RAG系统的地基环节。切分策略包括按Token数切分、语义切分、Parent-Child Chunk等。
术语属性
- commonStrategies:固定Token切分、语义切分、Parent-Child Chunk、按文档结构切分
- typicalSizes:FAQ/短政策200-500 Token,技术文档400-800 Token
Entity
将原始文档按照一定策略切分成适合检索和生成的小块(Chunk),是RAG系统的地基环节。切分策略包括按Token数切分、语义切分、Parent-Child Chunk等。