ForcePilot/backend/package/yuxi/knowledge/chunking/ragflow_like/utils
ZHOU Shujian 6934e19030 feat(chunking): 新增语义分块预设,支持基于嵌入和聚类的智能切分
- 添加语义分块预设选项,使用嵌入模型和聚类算法进行语义切分
- 实现标题路径增强、表格转换和图像标题处理等语义增强功能
- 新增NLTK相关依赖并持久化数据包,避免重复下载
- 添加完整的单元测试验证语义切分逻辑
2026-04-22 16:48:11 +08:00
..
md_parser_utils.py feat(chunking): 新增语义分块预设,支持基于嵌入和聚类的智能切分 2026-04-22 16:48:11 +08:00
semantic_utils.py feat(chunking): 新增语义分块预设,支持基于嵌入和聚类的智能切分 2026-04-22 16:48:11 +08:00
table_utils.py feat(chunking): 新增语义分块预设,支持基于嵌入和聚类的智能切分 2026-04-22 16:48:11 +08:00