kris/ForcePilot
1
0
Fork 0
Code Issues Pull Requests Actions 1 Packages Projects Releases Wiki Activity
677 Commits 12 Branches 0 Tags 71 MiB
32c34762d3
Commit Graph

62 Commits

Author SHA1 Message Date
Wenjie Zhang
32c34762d3 feat(DataBaseInfoView): 添加右侧面板切换功能，优化文件过滤和排序逻辑，更新样式以提升用户体验 2025-07-26 15:19:11 +08:00
Wenjie Zhang
b50d555e37 style(DataBaseInfoView): 为文件名添加文件类型图标和颜色 2025-07-26 11:18:54 +08:00
Wenjie Zhang
7d4722b62c feat: 更新知识库相关配置 
- 实现QA数据
- 优化现在创建知识库的体验
- 优化文件处理与加载方法
- 整体的格式检查与优化
- 优化 Embedding model 的加载逻辑，修复并行问题
- 优化整体的颜色布局
- 移除未使用的接口（前后端）
- 优化知识库的 chunk 逻辑
- 添加新的 Embedding模型支持
- 修复新建知识库后，Agent无法reload的问题
 2025-07-26 03:36:54 +08:00
Wenjie Zhang
770d098f05 refactor(database): 文件结构优化，顺便修复了 chroma 的 embedding 错误 2025-07-23 19:21:45 +08:00
Wenjie Zhang
346b85836b style(database/agent): 调整字体大小和颜色，修改标题加载状态，增强用户界面体验。 2025-07-23 12:54:36 +08:00
Wenjie Zhang
21a9a3236f feat: 更新 HeaderComponent 和 KnowledgeGraphViewer 组件，优化样式和功能，添加文件详情弹窗，增强用户交互体验 2025-07-23 03:52:22 +08:00
Wenjie Zhang
9d9101a3e5 refactor(router): 更新系统路由 2025-07-22 17:29:38 +08:00
Wenjie Zhang
84039ae474 feat: 添加OCR服务健康检查和统计功能，优化PDF解析逻辑，增强错误处理机制 2025-07-21 19:25:07 +08:00
Wenjie Zhang
14d95ce64c
feat: 知识库更新，支持Milvus、Chroma、Lightrag类型的知识库 (#223) 2025-07-21 18:18:47 +08:00
Wenjie Zhang
5ed016298c feat: 更新 Docker 配置，添加 Milvus 令牌支持，优化健康检查命令，移除 PostgreSQL 配置，调整环境变量，增强系统稳定性 2025-07-18 11:29:12 +08:00
Wenjie Zhang
6810f1f84e feat: 在依赖组中添加 ruff 依赖，并优化代码中的类型提示和异常处理，提升代码可读性和稳定性 2025-07-02 02:38:36 +08:00
Wenjie Zhang
8f37e1c8d9 feat: 增加 LightRAG的图谱可视化功能（但是目前的检索和可视化会出现跨知识库的情况，需要继续debug） 2025-06-30 22:29:23 +08:00
Wenjie Zhang
7b846ff76b fix: 更新数据库路径和日志配置，确保兼容性和可维护性 2025-06-28 20:19:26 +08:00
Wenjie Zhang
30163baed4 feat: !important 讲知识库的后端修改为 LightRAG 添加 PostgreSQL 支持和环境变量配置 
- 在 docker-compose.yml 中新增 PostgreSQL 服务配置，包括健康检查和环境变量设置。
- 添加 PostgreSQL 初始化脚本，确保数据库和用户的创建及权限配置。
- 更新 pyproject.toml，新增 asyncpg 和 graspologic 依赖。
- 重构知识库管理逻辑，使用 LightRagBasedKB 替代原有 KnowledgeBase 类，优化知识库的管理和查询功能。
- 更新前端 API 接口，调整文件处理和数据库创建逻辑，支持新的嵌入模型配置。
 2025-06-27 01:55:04 +08:00
Wenjie Zhang
57299fda8d chore: 更新配置文件和日志路径 
- 在 docker-compose.yml 中新增测试目录挂载。
- 修改 __init__.py 文件，更新配置文件路径以使用 save_dir 变量。
- 更新 logging_config.py 文件，调整日志文件路径至 tmp/logs，并确保相应目录存在。
- 移动 test/test_neo4j.py 文件
 2025-06-26 02:13:46 +08:00
Wenjie Zhang
4afbb42f96 feat: 添加自动索引功能，优化文件处理流程 
- 在知识库中新增自动索引参数，支持在文件处理后自动触发索引。
- 更新前端界面，允许用户配置自动索引选项，并在处理结果中反馈索引状态。
- 调整定时器刷新间隔，提高数据库信息更新的实时性。
 2025-06-25 02:45:57 +08:00
Wenjie Zhang
3e64a4249b feat: 更新文件索引状态处理逻辑 
- 在 knowledgebase.py 中将文件索引失败时的状态更新为 "pending_indexing"。
- 在 DataBaseInfoView.vue 中调整条件判断，允许在文件状态为 "pending_indexing" 或 "failed" 时显示操作按钮。
 2025-06-24 00:14:34 +08:00
Wenjie Zhang
eeb53f4774 feat: 添加 PaddleX OCR 支持及示例更新 
- 在 example_usage.py 中更新分析文档的示例，使用新的 PaddleX OCR 服务。
- 在 data_router.py 中优化文件处理反馈信息，增加处理失败文件的统计。
- 在 indexing.py 中新增对 PaddleX OCR 的支持。
- 在 _ocr.py 中添加 process_pdf_paddlex 方法，集成 PaddleX OCR 处理逻辑。
- 新增 paddlex.py 文件，封装 PaddleX 版面解析服务的 API 调用。
- 更新前端 DataBaseInfoView.vue，增加 PaddleX OCR 选项。
- 新增测试文件 PixPin_2025-06-19_23-42-17.png 以支持 OCR 测试。
 2025-06-23 10:09:51 +08:00
Wenjie Zhang
e1b02e0458 refactor: 优化时间格式化函数 2025-06-18 21:43:44 +08:00
Wenjie Zhang
c6ab72cd5b refactor: 项目配置重构及 OCR 功能增强 
- 更新 .gitignore，忽略本地文件。
- 调整 docker-compose.yml，优化服务配置及端口设置。
- api.Dockerfile 更换为基于 NVIDIA CUDA 的镜像，支持 GPU。
- pyproject.toml 新增依赖 langchain-tavily，并升级 mineru。
- tools_factory.py 重构，采用 langchain_tavily 的 TavilySearch。
- knowledgebase.py 增强 Milvus 连接异常的错误日志。
- _ocr.py 中 OCRPlugin 升级，使用 mineru 新解析方法，并调整健康检查 URL。
- 新增 mineru.py，实现文档解析逻辑。
- logging_config.py 优化日志配置，采用 loguru 管理日志。
- DataBaseInfoView.vue 新增分块参数配置及文件上传相关弹窗和功能。
 2025-06-18 19:07:29 +08:00
Wenjie Zhang
582742d016 feat: 优化数据库信息视图和文件删除功能 
- 将删除数据库按钮移至编辑对话框的底部，增强用户交互体验。
- 改进文件上传模式选择的样式，提升可用性。
- 添加批量删除文件的处理逻辑，支持用户选择多个文件进行删除。
 2025-05-26 22:50:47 +08:00
Wenjie Zhang
b10edefe17 feat: 优化知识库和文件展示逻辑 
- 更新了 KnowledgeDatabase 和 KnowledgeFile 的 to_dict 方法，支持选择性加载节点信息。
- 在 KnowledgeBase 中调整了数据库获取逻辑，确保在获取数据库时不加载文件节点。
- 在前端组件中添加了加载状态指示，改善了用户体验。
- 增强了数据库信息视图的交互性，支持批量索引和删除文件功能。
 2025-05-26 20:39:31 +08:00
Wenjie Zhang
9d2604801d feat: 优化知识库和文件详情展示 
- 在知识库中简化了文件加载逻辑，移除了不必要的节点加载。
- 将文件详情展示从抽屉组件改为模态框，增强用户体验。
- 添加了加载状态指示，改善了文件详情的展示效果。
- 新增分页功能，提升了文件列表的可用性。
 2025-05-26 13:59:05 +08:00
Wenjie Zhang
d9802414f1 feat: 更新依赖和优化数据处理接口 
-  优化了数据路由器中的文件和 URL 分块处理逻辑，增加了错误处理和日志记录。
- 更新了前端 API 接口以支持新的文件索引流程，移除了过时的接口。
 2025-05-26 13:12:17 +08:00
Wenjie Zhang
b0db3c6b0d feat: 更新 Docker 配置和添加 MinerU OCR 服务 
- 修改了 docker-compose.yml，更新了 API 和 Web 服务的镜像名称，并添加了 MinerU OCR 服务。
- 在 pyproject.toml 中添加了 Ruff 代码检查工具的配置。
- 更新了 API 和 Web Dockerfile，添加了代理环境变量。
- 新增了用于拉取 Docker 镜像的脚本。
- 在文档中添加了关于如何使用 MinerU OCR 的说明。
- 优化了代码结构和日志记录，提升了可读性和维护性。
 2025-05-23 15:30:14 +08:00
Wenjie Zhang
645acff37c fix 修复时区显示问题以及知识库描述显示不全的问题 2025-05-15 23:06:19 +08:00
Wenjie Zhang
8a6664758e 添加 知识库信息更新方法，支持修改标题和描述 2025-05-10 10:53:15 +08:00
Wenjie Zhang
d5d570829b 修复：修复文件上传的权限问题 2025-05-10 10:53:15 +08:00
Wenjie Zhang
7449938775 支持使用URL添加到知识库； 2025-05-10 10:53:14 +08:00
Wenjie Zhang
a454389f6e 继续优化接口，移除无关模块：（1）移除原本的 Token 管理模块；（2）所有 API 请求使用 /api 前缀；（3）移除重复的中间件验证；（4）前后端都移除工具模块；（5）移除原本的 safe_config 模块；（6）其他小细节优化 2025-05-10 10:53:14 +08:00
Wenjie Zhang
c6474f6585 统一前端对于接口的使用 2025-05-10 10:53:14 +08:00
Wenjie Zhang
9fdc6a6b77 基本权限控制功能实现 2025-05-10 10:53:14 +08:00
Wenjie Zhang
642b8411a7 使用数据库替代现有的 json 形式 2025-04-05 13:10:47 +08:00
zhaoshibao
152707a1b9 1、新增知识库文件删除提示功能，防止文件误删除；解决新建数据库弹窗右上角关闭按钮关闭不了问题。（关联 Issue #113 #114） 2025-03-31 18:05:38 +08:00
Wenjie Zhang
2864acd029 修复数据库删除后，文件夹没有删除的 bug 2025-03-24 11:14:00 +08:00
Wenjie Zhang
7563c116fc 优化文档添加逻辑 2025-03-23 23:10:32 +08:00
Wenjie Zhang
f797d66128 优化上传逻辑 2025-03-20 20:31:14 +08:00
Wenjie Zhang
d26fda4053 更新了很多 
- 添加了系统提示词
- 添加了知识库的加载方式
 2025-03-20 19:51:46 +08:00
Wenjie Zhang
87807953b5 1. 添加 chunk 信息 
2. 前端的chunk展示优化，默认使用 start_char_idx，如果没有则使用 id
3. 修改默认overlap为100token
 2025-03-12 21:15:04 +08:00
Wenjie Zhang
952841c68d 优化部分并行性能 2025-03-06 23:55:20 +08:00
Wenjie Zhang
1bf0af44dd 优化细节 2025-02-28 02:41:57 +08:00
Wenjie Zhang
d9e39a7a7d Merge branch 'main' of https://github.com/xerrors/Yuxi-Know 2025-02-20 01:26:12 +08:00
Wenjie Zhang
aeabe769d6 优化部分视觉表现 2024-10-24 20:08:23 +08:00
Wenjie Zhang
0ff38ffe8c update 2024-10-14 16:51:20 +08:00
Wenjie Zhang
39ff8a07a9 sync 2024-10-08 22:16:17 +08:00
Wenjie Zhang
02686db89f temp 2024-10-02 20:11:28 +08:00
Wenjie Zhang
06ed1a44ed update color cystem 2024-09-25 13:46:51 +08:00
Wenjie Zhang
b6abb2c8e7 graph support 2024-09-18 21:03:12 +08:00
Wenjie Zhang
89af621753 add header style 2024-09-14 02:46:44 +08:00
Wenjie Zhang
9f191e739e fix: 知识库的检索设置里面没有设计需要向量模型匹配才能使用 2024-09-13 21:05:46 +08:00