- 添加语义分块预设选项,使用嵌入模型和聚类算法进行语义切分 - 实现标题路径增强、表格转换和图像标题处理等语义增强功能 - 新增NLTK相关依赖并持久化数据包,避免重复下载 - 添加完整的单元测试验证语义切分逻辑 |
||
|---|---|---|
| .. | ||
| chunking | ||
| graphs | ||
| implementations | ||
| utils | ||
| __init__.py | ||
| base.py | ||
| factory.py | ||
| manager.py | ||
- 添加语义分块预设选项,使用嵌入模型和聚类算法进行语义切分 - 实现标题路径增强、表格转换和图像标题处理等语义增强功能 - 新增NLTK相关依赖并持久化数据包,避免重复下载 - 添加完整的单元测试验证语义切分逻辑 |
||
|---|---|---|
| .. | ||
| chunking | ||
| graphs | ||
| implementations | ||
| utils | ||
| __init__.py | ||
| base.py | ||
| factory.py | ||
| manager.py | ||