gardel/Mofox-Core
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
5,409 Commits 1 Branch 0 Tags
6f387a5b52aa060f8e656cd8f4ac481a4433c158
Commit Graph

5409 Commits

This Branch
This Branch
All Branches
Author SHA1 Message Date
明天好像没什么
6f387a5b52 Revert "这是一个测试提交" 
This reverts commit 7f452fa386.
 2025-11-19 23:36:34 +08:00
雅诺狐
8bb2904437 这是一个测试提交 2025-11-19 23:36:33 +08:00
明天好像没什么
63f8b131b9 权限 2025-11-19 23:36:33 +08:00
tt-P607
460b73b3e2 feat(chat): 优化回复内容过滤器，杜绝格式模仿 
核心问题：
修复了模型在生成回复时，偶尔会模仿并输出Prompt中用于示例的 [回复<...>] 格式的问题。此问题会导致最终发送的消息包含不应出现的多余文本。

实现方案：

精准定位过滤时机：
将过滤逻辑从原先的 send_api 前置到 default_generator 的 llm_generate_content 方法中。这确保了在LLM生成内容后、任何后续处理（如回复分割）前，第一时间对不规范内容进行清理，从根源上解决了问题。

强化正则表达式：
采用了一个更严格的正则表达式 r'\[\s*回复\s*<.+?>.*?\]'，并设置了 re.DOTALL 标志。此举旨在“宁可错杀，不可放过”，能够更有效地匹配并清除各种复杂的、甚至包含换行的模仿格式。

处理嵌套残留：
在正则替换后，增加了一步额外的检查。如果清理后的字符串以 ] 开头（通常由嵌套括号引起），则会移除这个残留的字符，确保最终内容的绝对纯净。

增加日志监控：
为过滤器增加了 logger.warning 日志。当过滤器成功触发并清理内容时，会详细记录原始内容与清理后的内容，便于后续追踪和分析模型行为。

代码结构优化：

移除了 llm_generate_content 方法中原有的、效果较差的旧清理逻辑，避免了代码冗余。
修正了 build_memory_block 方法中一处错误的属性访问，将 stream.chat_history_manager 更正为 stream.context_manager，解决了潜在的 AttributeError。
最终效果：
通过以上修改，我们构建了一套健壮、精准且可观测的回复内容过滤机制，彻底解决了模型模仿系统消息格式的问题，显著提升了回复内容的质量与规范性
 2025-11-19 23:36:33 +08:00
tt-P607
03fcc8043c refactor(core): 简化回复清理并加强 API 调用此次提交彻底重构了回复清理逻辑，以提升可维护性，并在发送 API 中引入了多项防御性检查，以防止常见的运行时错误。通过将复杂的迭代清理算法替换为单一且更高效的正则表达式，回复生成过程得到了简化。这不仅提高了去除模型生成的头信息的可靠性，还显著降低了代码复杂性。在发送 API 中，实现了多个安全措施：- 修正了异步处理错误，通过移除同步字典操作上无效的 await，防止出现 TypeError。- 添加了预检验证，以确保文件上传有定义的目标，并且临时流指定了平台。- 现在一致将机器人用户 ID 转换为字符串，以消除潜在的类型相关不一致。最后，为了清晰起见，机器人的行为原则术语也进行了调整。 2025-11-19 23:36:32 +08:00
Windpicker-owo
4e971ccb22 fix(affinity-chatter): 使用全局配置中的超时设置增强规划器的消息处理 2025-11-19 23:36:32 +08:00
Windpicker-owo
c4c7c4ccc8 fix(cache-manager): 修复类型注解，使用Optional以提高代码可读性和一致性 2025-11-19 23:36:31 +08:00
minecraft1024a
b76ccfe05b feat(deps): 引入 filetype 库替代废弃的 imghdr 
为了应对 Python 3.13 中 `imghdr` 库被废弃的问题，本项目引入 `filetype` 库作为替代方案。

`filetype` 提供了更现代、更可靠的文件类型推断功能。本次更新已将 `content_service.py` 中用于识别图片格式的逻辑从 `imghdr` 切换到 `filetype`，并相应地更新了 `pyproject.toml` 和 `requirements.txt` 依赖文件。

哎呀，`imghdr` 那个老古董总算是要被淘汰了，再不换掉，迟早要变成历史遗留问题。哼，这种事情还得我来提醒主人，真是让人操心。
 2025-11-19 23:36:31 +08:00
minecraft1024a
f46ebd9759 refactor(typo-generator): 调整词典文件路径获取方式以提高通用性 
将 `dict.txt` 的路径获取方式从依赖 `rjieba` 包的相对路径改为基于项目根目录的相对路径。这避免了因 `rjieba` 包内部结构变化而导致路径失效的问题，增强了代码的健壮性和可移植性。
 2025-11-19 23:36:31 +08:00
Windpicker-owo
ce558514c3 fix(cache-manager): 修复并行获取缓存统计信息和内存使用，避免死锁和重复计数 
fix(scheduler): 改进调度任务的多阶段取消机制，彻底避免死锁风险
 2025-11-19 23:36:30 +08:00
Windpicker-owo
e716dee371 feat(event-manager): 引入asyncio库以支持异步事件处理 2025-11-19 23:36:30 +08:00
Windpicker-owo
43d4aa3f0b feat(scheduler): 新增死锁检测器，改进任务取消机制，优化异步通知 2025-11-19 23:36:28 +08:00
minecraft1024a
73e564a378 Revert "feat(visualizer): 引入核心图按需加载和节点扩展功能" 
This reverts commit 0c41cd2a13.
 2025-11-19 23:36:27 +08:00
Windpicker-owo
fa61e38e15 fix(distribution-manager): 优化消息处理逻辑，直接刷新未读消息缓存 2025-11-19 23:36:27 +08:00
Windpicker-owo
9ffc26bec3 fix(config): 增加缓存生存时间和最大内存占用限制 2025-11-19 23:36:27 +08:00
minecraft1024a
aa0f57cb99 feat(visualizer): 引入核心图按需加载和节点扩展功能 
为了解决记忆图谱数据量过大导致前端加载缓慢和渲染卡顿的问题，本次更新引入了核心图按需加载和节点扩展机制。

主要变更包括：

- **后端 (API):**
    - 新增 `/api/graph/core` 端点，该端点不再返回全量图数据，而是智能选取“度”最高的 Top N 核心节点作为初始视图，大幅减少初次加载的数据量。
    - 新增 `/api/nodes/{node_id}/expand` 端点，允许前端在用户双击节点时，动态请求该节点的所有邻居节点和相关边，实现按需增量加载。
    - 优化了数据加载逻辑，在内存中构建并缓存了节点字典和邻接表，以极高的效率支持节点扩展查询。

- **前端 (UI):**
    - 初始加载逻辑从请求 `/api/graph/full` 切换到新的 `/api/graph/core` 端点。
    - 实现了双击节点触发 `expandNode` 函数的交互，调用后端接口获取并动态地将新节点和边合并到现有图中，而不是重新渲染整个图。
    - 使用 `vis.DataSet` 来管理图数据，支持高效地动态添加和更新节点与边。
    - 节点大小现在与其“度”（连接数）相关联，使得关键节点在视觉上更加突出。
 2025-11-19 23:36:26 +08:00
minecraft1024a
a0b069dfa5 fix(api): 修复记忆可视化中重复的边 
在从内存管理器和文件加载图数据时，由于遍历所有记忆（memory）并收集其关联的边（edge）时没有进行去重处理，导致同一条边如果被多个记忆引用，会在最终的图谱中重复出现，造成前端可视化混乱。

为了解决这个问题，引入了一个集合（set）或字典（dict）来跟踪已经处理过的边的ID。在遍历边的过程中，只有当边的ID未被记录时，才会将其添加到最终的边列表中。这样可以确保每条边在图谱数据中只出现一次，保证了可视化结果的准确性。
 2025-11-19 23:36:26 +08:00
minecraft1024a
e350b5a177 Revert "fix(api): 修复记忆可视化中重复的边" 
This reverts commit f8e42f3348.
 2025-11-19 23:36:26 +08:00
Windpicker-owo
636b1e9fea feat(message-manager): 用流循环管理器替换调度器/分派器 
- 移除 scheduler_dispatcher 模块，并用 distribution_manager 替换
- 实现StreamLoopManager，以改进消息分发和中断处理
- 将消息缓存系统直接添加到StreamContext中，并配置缓存设置
- 使用具有缓存感知的消息处理来增强SingleStreamContextManager
- 更新`message_manager`，使用`stream_loop_manager`替代`scheduler_dispatcher`
- 在StreamContext数据模型中添加缓存统计和刷新方法
- 通过适当的任务取消和重新处理来改进中断处理
- 为ChatManager添加get_all_stream方法，以实现更优的流管理
- 更新亲和聊天规划器，以更可靠地处理专注/正常模式切换
 2025-11-19 23:36:25 +08:00
Windpicker-owo
617ee5b5cb refactor: 更新调度器以使用任务名称替代调度ID，增强任务管理和清理无效记录功能 2025-11-19 23:36:24 +08:00
Windpicker-owo
924c267a48 refactor: 优化记忆激活机制，增加快速批量激活功能以提升性能 2025-11-19 23:36:24 +08:00
Windpicker-owo
b0b1ab3dc5 refactor: 移除锁机制，优化统一调度器的并发执行设计 2025-11-19 23:36:24 +08:00
minecraft1024a
679c787551 fix(api): 修复记忆可视化中重复的边 
在从文件或内存管理器加载图数据时，由于遍历所有记忆（memory）并将其包含的边（edge）添加到列表中，导致了边的重复。当多个记忆共享同一条边时，这条边会被多次添加到最终的边列表中，造成前端可视化图中出现冗余的连接。

此提交通过引入一个集合（set）或字典（dict）来跟踪已经处理过的边的 ID，确保每条边只被添加一次，从而解决了重复边的问题。
 2025-11-19 23:36:23 +08:00
Windpicker-owo
bab62ed42e refactor: 优化兴趣值管理器和统一调度器，增强任务执行的并发控制 2025-11-19 23:36:23 +08:00
Windpicker-owo
d751945a0e 修复: 更新消息分发管理器以提高性能和稳定性 2025-11-19 23:36:22 +08:00
明天好像没什么
26d22e5dd8 ruff 2025-11-19 23:36:06 +08:00
minecraft1024a
5702dd8a9f refactor(server): 将记忆可视化工具和统计功能整合进主服务 
将原先独立的记忆可视化工具（Memory Visualizer）和LLM使用统计逻辑深度整合到项目主服务中。

主要变更包括：
- **移除独立的可视化工具**: 删除了 `tools/memory_visualizer` 目录下的所有独立服务器、脚本和文档，清理了项目结构。
- **API路由整合**: 在主 FastAPI 应用中注册了记忆可视化工具的路由，使其成为核心功能的一部分，可通过 `/visualizer` 访问。
- **统计逻辑重构**: 将LLM使用统计的计算逻辑从API路由层 `statistic_router.py` 中剥离，迁移到 `src/chat/utils/statistic.py` 中，实现了逻辑的解耦和复用。API路由现在直接调用重构后的统计任务。
- **依赖清理与添加**: 添加了 `jinja2` 作为模板渲染的依赖，并清除了与独立可视化工具相关的旧依赖。

此次重构简化了项目的维护和部署，将原本分散的功能统一管理，提升了代码的内聚性和可维护性。
 2025-11-19 23:35:41 +08:00
minecraft1024a
dad6a3fc6f feat(search): 添加 Serper 搜索引擎支持 
本次更新为 WebSearch 模块集成了新的搜索引擎 Serper。

- 在 `WebSearchConfig` 中增加了 `serper_api_keys` 配置项。
- 更新了配置文件模板，加入了 `serper_api_keys` 选项，并在 `enabled_engines` 的可选列表中添加了 "serper"。
- 相应地更新了配置文件版本号。
 2025-11-19 23:35:40 +08:00
minecraft1024a
0e77219db2 ruff 2025-11-19 23:35:39 +08:00
Windpicker-owo
44d5a9fe73 refactor(scheduler): 移除不必要的 schedule 锁管理代码 2025-11-19 23:35:39 +08:00
Windpicker-owo
a5481121b8 feat: 添加向量数据清理脚本，确保向量数据仅存储在专门的向量数据库中 2025-11-19 23:35:39 +08:00
minecraft1024a
5e3b058162 refactor(chatter): 移除冗余的私聊/群聊总开关检查 
主动思考功能的启用/禁用逻辑现在完全由黑白名单机制控制。移除原有的全局开关可以简化配置项，并使调度器中的判断逻辑更加清晰。
 2025-11-19 23:35:39 +08:00
SolenmeChiara
45f0ba97ef chore: 应用maintainer的日志优化建议 
- 将maizone调试日志级别从info改为debug
- 删除无用的f-string (sourcery-ai建议)
- 删除冗余的debug日志
- 优化send_handler日志级别

Co-authored-by: minecraft1024a <140055845+minecraft1024a@users.noreply.github.com>
 2025-11-19 23:35:38 +08:00
SolenmeChiara
649f4a9953 chore: 删除content_service中过于个人化的存在主义prompt 
- 保留所有功能性bug修复（enable_splitter, 模型fallback等）
- 删除第343-354行的哲学独白
- 保留合理的说说生成指导

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 23:35:38 +08:00
SolenmeChiara
8df7babacb fix(bot): 修复adapter_response被echo检查拦截的严重bug 
问题：
- Napcat发送adapter_response时同时设置了echo=True
- 原逻辑先检查echo，导致adapter_response消息被提前return
- Maizone获取Cookie等功能完全失效（超时40秒）

修复：
- 将adapter_response检查移到echo检查之前
- 确保adapter_response消息优先处理
- 移除重复的adapter_response检查逻辑

影响：
- Maizone插件现在可以正确获取QQ空间Cookie
- 所有adapter命令响应都能正常工作

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 23:35:37 +08:00
SolenmeChiara
258186865a chore: 恢复PR改动并适配官方最新版本 
在官方更新到4936a6d后，选择性恢复PR中的功能改动：

Maizone插件修复（6个文件）:
- 优化成功/失败反馈机制（直接反馈，不使用AI生成）
- 实现QQ空间Cookie失效自动重试机制
- 修复评论回复被分割导致标点符号丢失的问题
- 修复QQ空间转发内容提取错误
- 改进maizone图片识别模型配置，支持自动fallback
- 优化maizone说说生成规则

适配器响应处理（bot.py）:
- 添加adapter_response消息处理逻辑
- 适配新的DatabaseMessages架构
- 在message_process早期阶段优先处理adapter_response

Web搜索引擎扩展:
- 添加Serper搜索引擎支持

LLM成本计算修复:
- 修复LLM使用统计中成本计算错误的bug
- 调整LLM相关日志级别为DEBUG

其他优化:
- 优化NapCat adapter响应处理
- 优化person_info关系推理逻辑

注：本次恢复已跳过与官方冲突的部分，保留官方的新架构改进

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 23:35:37 +08:00
Windpicker-owo
b02c0e561d fix: 等待最多3秒以确保取消正在执行的任务，避免潜在的阻塞 2025-11-19 23:35:36 +08:00
Windpicker-owo
2caaa5e533 refactor: 优化嵌入生成逻辑，失败时返回 None，简化错误处理；更新调度器任务管理逻辑 2025-11-19 23:35:36 +08:00
Windpicker-owo
d199c0986c fix: 等待取消正在执行的任务以确保任务正确终止 2025-11-19 23:35:36 +08:00
Windpicker-owo
47865c5ff7 chore: 更新项目版本至0.12.0，添加aiofiles依赖；优化调度器任务执行逻辑，避免重复触发 2025-11-19 23:35:36 +08:00
Windpicker-owo
c4a9c8a44a refactor: 移除多查询生成方法，简化记忆检索逻辑；在工具接口中添加当前时间信息 2025-11-19 23:35:35 +08:00
copilot-swe-agent[bot]
3b0b18de9c refactor: 消除重复代码并优化记忆系统结构 
- 提取共享工具函数到 utils 模块
  - 创建 utils/similarity.py: 统一余弦相似度计算
  - 创建 utils/graph_expansion.py: 统一图扩展算法
- 删除重复实现
  - manager.py: 删除 _cosine_similarity 和 _fast_cosine_similarity (60行)
  - tools/memory_tools.py: 删除 _expand_with_semantic_filter 和 _cosine_similarity (150行)
- 清理废弃代码
  - 删除 tools/memory_tools.py 中10行注释掉的旧代码
  - 删除空的 retrieval/ 模块
- 净减少 ~150行重复代码

Co-authored-by: Windpicker-owo <221029311+Windpicker-owo@users.noreply.github.com>
 2025-11-19 23:35:35 +08:00
copilot-swe-agent[bot]
f8e58ef229 fix: 修复代码质量问题 - 更正异常处理和导入语句 
Co-authored-by: Windpicker-owo <221029311+Windpicker-owo@users.noreply.github.com>
 2025-11-19 23:35:35 +08:00
copilot-swe-agent[bot]
ea724eb5d4 Initial plan 2025-11-19 23:35:34 +08:00
tt-P607
dcf4912a7d feat(napcat): 修复JSON消息处理并优化依赖 
- **修复(bug)**: 解决了在处理 `json` 类型的消息段时，因未导入 `json` 模块而导致的 `NameError` 运行时错误。
- **优化(refactor)**: 根据项目规范，将 `json` 模块的调用全部替换为性能更优的 `orjson`，并移除了多余的 `import` 语句，提升了代码质量和运行效率。
 2025-11-19 23:35:34 +08:00
Windpicker-owo
30e43c8a28 fix(CreateMemoryTool): 更新属性字段说明，增加时间精确度至小时分钟 2025-11-19 23:35:31 +08:00
Windpicker-owo
5c40fe50c9 feat(memory): 更新记忆管理和配置，优化整合逻辑，添加语义相似度阈值 2025-11-19 23:35:31 +08:00
Windpicker-owo
2dbe615057 feat(memory-graph): 添加记忆图系统配置，整合节点去重合并器与记忆管理器 2025-11-19 23:35:30 +08:00
Windpicker-owo
16be633dc2 feat(deduplicate_memories): 添加记忆去重工具，支持预览模式和相似度阈值设置 2025-11-19 23:35:30 +08:00
Windpicker-owo
5c2b7bc5ba fix(manager): 优化记忆整合逻辑，添加批量处理限制，提升性能和稳定性 
fix(config): 更新配置文件版本，调整记忆整合阈值和时间窗口设置
 2025-11-19 23:35:30 +08:00