kris/ForcePilot
1
0
Fork 0
Code Issues Pull Requests Actions 1 Packages Projects Releases Wiki Activity
682 Commits 12 Branches 0 Tags 71 MiB
316bc609c2
Commit Graph

57 Commits

Author SHA1 Message Date
Wenjie Zhang
4f8e1e19e1 feat(batch_upload): 添加批量上传和处理文件功能，支持文件记录管理，优化API交互和错误处理逻辑(并发访问Milvus） 2025-07-27 01:02:14 +08:00
Wenjie Zhang
7d4722b62c feat: 更新知识库相关配置 
- 实现QA数据
- 优化现在创建知识库的体验
- 优化文件处理与加载方法
- 整体的格式检查与优化
- 优化 Embedding model 的加载逻辑，修复并行问题
- 优化整体的颜色布局
- 移除未使用的接口（前后端）
- 优化知识库的 chunk 逻辑
- 添加新的 Embedding模型支持
- 修复新建知识库后，Agent无法reload的问题
 2025-07-26 03:36:54 +08:00
Wenjie Zhang
75c52a3855 feat(router): 添加工具路由，更新聊天和智能体相关功能，优化工具获取逻辑 2025-07-24 00:45:47 +08:00
Wenjie Zhang
770d098f05 refactor(database): 文件结构优化，顺便修复了 chroma 的 embedding 错误 2025-07-23 19:21:45 +08:00
Wenjie Zhang
9d58ebc13c refactor(agent): 将智能体相关的名称参数更改为ID，优化智能体管理逻辑 2025-07-22 17:30:00 +08:00
Wenjie Zhang
9d9101a3e5 refactor(router): 更新系统路由 2025-07-22 17:29:38 +08:00
Wenjie Zhang
24e3937aa2 fix: 将当前用户ID转换为字符串格式，以确保在数据库查询中正确匹配 2025-07-22 04:10:00 +08:00
Wenjie Zhang
84039ae474 feat: 添加OCR服务健康检查和统计功能，优化PDF解析逻辑，增强错误处理机制 2025-07-21 19:25:07 +08:00
Wenjie Zhang
14d95ce64c
feat: 知识库更新，支持Milvus、Chroma、Lightrag类型的知识库 (#223) 2025-07-21 18:18:47 +08:00
Wenjie Zhang
5ed016298c feat: 更新 Docker 配置，添加 Milvus 令牌支持，优化健康检查命令，移除 PostgreSQL 配置，调整环境变量，增强系统稳定性 2025-07-18 11:29:12 +08:00
Wenjie Zhang
6810f1f84e feat: 在依赖组中添加 ruff 依赖，并优化代码中的类型提示和异常处理，提升代码可读性和稳定性 2025-07-02 02:38:36 +08:00
Wenjie Zhang
d5e1ab8c05 fix: 移除重启接口中的知识库重启逻辑，优化重启流程 2025-07-01 13:25:12 +08:00
Wenjie Zhang
8f37e1c8d9 feat: 增加 LightRAG的图谱可视化功能（但是目前的检索和可视化会出现跨知识库的情况，需要继续debug） 2025-06-30 22:29:23 +08:00
Wenjie Zhang
7b846ff76b fix: 更新数据库路径和日志配置，确保兼容性和可维护性 2025-06-28 20:19:26 +08:00
Wenjie Zhang
a91d57f274 fix: 更新嵌入模型配置，修复相关信息获取逻辑 
- 修改数据路由器中的嵌入模型信息获取方式，确保使用正确的配置项。
- 在 LightRagBasedKB 类中，增强 LLM 和嵌入函数的获取逻辑，支持动态配置。
- 更新嵌入模型和重排序模型的 URL 获取方式，统一为 base_url。
- 前端数据库视图中，调整嵌入模型选择的样式和信息展示，提升用户体验。
 2025-06-27 12:22:35 +08:00
Wenjie Zhang
30163baed4 feat: !important 讲知识库的后端修改为 LightRAG 添加 PostgreSQL 支持和环境变量配置 
- 在 docker-compose.yml 中新增 PostgreSQL 服务配置，包括健康检查和环境变量设置。
- 添加 PostgreSQL 初始化脚本，确保数据库和用户的创建及权限配置。
- 更新 pyproject.toml，新增 asyncpg 和 graspologic 依赖。
- 重构知识库管理逻辑，使用 LightRagBasedKB 替代原有 KnowledgeBase 类，优化知识库的管理和查询功能。
- 更新前端 API 接口，调整文件处理和数据库创建逻辑，支持新的嵌入模型配置。
 2025-06-27 01:55:04 +08:00
Wenjie Zhang
9bc5b086f9 chore: 移除 Chat 、Retriever 相关代码，知识库与知识图谱默认开启且无法修改 
- 删除 retriever.py 文件，移除不再使用的检索器逻辑。
- 更新 base_router.py，简化重启逻辑，移除 retriever.restart() 调用。
- 修改 config.py，移除知识库和知识图谱的配置项。
- 更新前端组件，调整与知识库相关的显示逻辑，确保界面一致性。
- 修改路由配置，移除与聊天相关的路由，优化用户导航体验。
 2025-06-27 01:52:59 +08:00
Wenjie Zhang
db38035577 chore: 移除不再使用的脚本和优化日志信息 
- 删除了 download_models.sh 和 migrate_kb_to_sqlite.py 脚本，清理不必要的代码。
- 在 base_router.py 中更新日志信息，调整为英文以提高可读性。
- 移除 retriever.restart() 调用，简化重启逻辑。
- 优化 OCRPlugin 中的注释，去除冗余代码。
 2025-06-27 01:47:52 +08:00
Wenjie Zhang
286e06f25b style: ruff check fix 2025-06-23 10:32:01 +08:00
Wenjie Zhang
eeb53f4774 feat: 添加 PaddleX OCR 支持及示例更新 
- 在 example_usage.py 中更新分析文档的示例，使用新的 PaddleX OCR 服务。
- 在 data_router.py 中优化文件处理反馈信息，增加处理失败文件的统计。
- 在 indexing.py 中新增对 PaddleX OCR 的支持。
- 在 _ocr.py 中添加 process_pdf_paddlex 方法，集成 PaddleX OCR 处理逻辑。
- 新增 paddlex.py 文件，封装 PaddleX 版面解析服务的 API 调用。
- 更新前端 DataBaseInfoView.vue，增加 PaddleX OCR 选项。
- 新增测试文件 PixPin_2025-06-19_23-42-17.png 以支持 OCR 测试。
 2025-06-23 10:09:51 +08:00
Wenjie Zhang
4ecf9a8cd6 feat: 添加系统信息配置功能 
- 在 API 路由中新增获取和重新加载系统信息配置的接口。
- 实现信息配置的加载逻辑，并提供默认配置。
- 更新前端以支持动态加载和展示信息配置。
- 修改 Dockerfile，移除代理设置。
 2025-06-22 23:07:57 +08:00
Wenjie Zhang
942a8e6b17 fix: 修复 Thread Table 没有自动创建的问题 #206 2025-06-05 08:59:35 +08:00
Wenjie Zhang
459b357b40 feat: 添加健康检查接口和前端支持 
- 在后端添加了健康检查接口，返回服务状态。
- 在前端新增健康检查API，支持检查服务端健康状态。 #199
- 登录页面增加服务状态提示，改善用户体验。
 2025-05-28 15:16:07 +08:00
Wenjie Zhang
b10edefe17 feat: 优化知识库和文件展示逻辑 
- 更新了 KnowledgeDatabase 和 KnowledgeFile 的 to_dict 方法，支持选择性加载节点信息。
- 在 KnowledgeBase 中调整了数据库获取逻辑，确保在获取数据库时不加载文件节点。
- 在前端组件中添加了加载状态指示，改善了用户体验。
- 增强了数据库信息视图的交互性，支持批量索引和删除文件功能。
 2025-05-26 20:39:31 +08:00
Wenjie Zhang
d9802414f1 feat: 更新依赖和优化数据处理接口 
-  优化了数据路由器中的文件和 URL 分块处理逻辑，增加了错误处理和日志记录。
- 更新了前端 API 接口以支持新的文件索引流程，移除了过时的接口。
 2025-05-26 13:12:17 +08:00
Wenjie Zhang
a6857c3e21 style: fix ruff check 2025-05-24 11:29:45 +08:00
Wenjie Zhang
911f88d7eb feat: 添加mineru健康检查端点并优化类型注解 
- 在 app.py 中新增健康检查端点以确认 API 正在运行。
- 优化了类型注解，使用更简洁的语法。
- 在 db_manager.py 中修正了日志信息的语言。
- 在 OCR 插件中添加了对 MinerU OCR 服务健康检查的逻辑。
 2025-05-23 22:16:34 +08:00
Wenjie Zhang
b0db3c6b0d feat: 更新 Docker 配置和添加 MinerU OCR 服务 
- 修改了 docker-compose.yml，更新了 API 和 Web 服务的镜像名称，并添加了 MinerU OCR 服务。
- 在 pyproject.toml 中添加了 Ruff 代码检查工具的配置。
- 更新了 API 和 Web Dockerfile，添加了代理环境变量。
- 新增了用于拉取 Docker 镜像的脚本。
- 在文档中添加了关于如何使用 MinerU OCR 的说明。
- 优化了代码结构和日志记录，提升了可读性和维护性。
 2025-05-23 15:30:14 +08:00
Wenjie Zhang
1f3e24cc37 fix: knowledgebase 初始化的时候表格没有创建 #199 2025-05-21 02:56:14 +08:00
Wenjie Zhang
6475170c4b refactor: 重构智能体管理和基础代理类 
- 将 AgentManager 类中的方法重命名为更具描述性的名称，并优化了代理的注册和实例化逻辑。
- 添加了线程ID和用户ID字段到基础代理类，并改进了获取历史消息的逻辑，增加了错误处理。
- 在 ChatbotAgent 中确保创建图时设置 checkpointer，并处理可能的异常。
 2025-05-20 22:21:51 +08:00
Wenjie Zhang
44fad724bf feat: 更新依赖并优化组件 
- 在 pyproject.toml 中添加了 colorlog、langchain-deepseek 和 langchain-together 依赖。
- 修改了 chat_router.py 中的日志记录方式。
- 重命名 tools_factory.py 中的函数以更好地描述其功能。
- 更新了配置文件以支持新的模型选择。
- 优化了前端组件的样式和功能，包括侧边栏和消息输入框的交互体验。
 2025-05-20 20:49:50 +08:00
Wenjie Zhang
9429a819ee refactor: 合并database数据库和server数据库 
- 同时合并管理器，将事务相关的内容修改到knowledgebase中
- 添加数据库迁移的检测脚本
 2025-05-17 23:36:01 +08:00
Wenjie Zhang
77ce5a25da feat: Agent 消息保存在SQLite 中 2025-05-16 23:46:25 +08:00
Wenjie Zhang
6212f5c456 fix: 修复普通用户的权限问题 2025-05-15 23:45:14 +08:00
Wenjie Zhang
a292e69b22 feat: 添加消息记录云端保存 
主要修改：
1. 服务端新增 Thread 模型，用于存储对话列表信息，但不保存实际的历史记录
2. langgraph 配置了 InMemorySaver，添加 thread_id 参数，消息对话保存在内存中（服务重启后丢失）
3. 添加获取历史记录的 API 接口，从内存中获取
4. 添加 Graph 的单例模式，get_runnable_agent 导致的重复创建 Agent 实例的情况。
5. 优化 Agent 管理页面，更容易配置，更容易调试
6. 添加独立页面的侧边栏。
 2025-05-15 22:37:50 +08:00
Wenjie Zhang
b01abfcf71 feat: Agent配置可以同步在用户侧了，用户侧会使用 config file 中的配置 2025-05-13 19:49:54 +08:00
Wenjie Zhang
8a6664758e 添加 知识库信息更新方法，支持修改标题和描述 2025-05-10 10:53:15 +08:00
Wenjie Zhang
be53fc837e fix add chunks bug 2025-05-10 10:53:15 +08:00
Wenjie Zhang
144632b703 进一步优化并行处理能力：file-to-chunk 部分优化完成 2025-05-10 10:53:15 +08:00
Wenjie Zhang
7449938775 支持使用URL添加到知识库； 2025-05-10 10:53:14 +08:00
Wenjie Zhang
67a15229f4 优化配置更新方法 2025-05-10 10:53:14 +08:00
Wenjie Zhang
a454389f6e 继续优化接口，移除无关模块：（1）移除原本的 Token 管理模块；（2）所有 API 请求使用 /api 前缀；（3）移除重复的中间件验证；（4）前后端都移除工具模块；（5）移除原本的 safe_config 模块；（6）其他小细节优化 2025-05-10 10:53:14 +08:00
Wenjie Zhang
c6474f6585 统一前端对于接口的使用 2025-05-10 10:53:14 +08:00
Wenjie Zhang
9fdc6a6b77 基本权限控制功能实现 2025-05-10 10:53:14 +08:00
Wenjie Zhang
c36d504a5c env update 2025-05-10 10:52:26 +08:00
Wenjie Zhang
0dd1d61204 修复 model_provider_lite 的 bug 2025-05-06 22:48:16 +08:00
Wenjie Zhang
aebad0ae5d 优化添加文件时，前后端的报错 2025-04-24 22:55:10 +08:00
Wenjie Zhang
9c61a8a436 优化embedding阶段的并行处理 2025-04-23 21:18:39 +08:00
Wenjie Zhang
04918055c9 优化一些样式预计说明文字 2025-04-15 12:39:46 +08:00
Wenjie Zhang
ce6f88b8b2 修复图谱检索结果重复的问题，同时将检索部分的逻辑代码，迁移到graphbase 里面 2025-04-15 10:49:30 +08:00