gardel/Mofox-Core
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
1,847 Commits 1 Branch 0 Tags
259a744a3bf5634b1dc0ac5838a33593121a65fb
Commit Graph

1847 Commits

This Branch
This Branch
All Branches
Author SHA1 Message Date
Windpicker-owo
259a744a3b feat(action): 将回复处理逻辑封装为异步函数，优化代码结构和可读性 2025-11-10 13:44:52 +08:00
Windpicker-owo
882f93c886 feat(reply): 引入增强的格式过滤器，优化回复内容清理逻辑 2025-11-10 13:36:17 +08:00
Windpicker-owo
8c4a54c75d feat(reply): 引入 reply 和 respond 动作，优化消息回复机制 
- 增加 reply 动作，针对单条消息进行深度回复，使用 s4u 模板。
- 增加 respond 动作，统一回应未读消息，使用 normal 模板。
- 更新核心动作插件以支持新动作，确保配置选项可用。
- 优化动作执行逻辑，提升对话流畅性和响应准确性。
 2025-11-10 13:24:45 +08:00
Windpicker-owo
c07e1641cf Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-10 09:53:33 +08:00
Windpicker-owo
2422e4d186 fix(emoji): 修正表情包分析提示中的描述和格式，增强分析准确性 2025-11-10 09:52:51 +08:00
tt-P607
3a00f0ac35 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 22:51:09 +08:00
tt-P607
e000e78c3d refactor(maizone): 提高稳健性并集中管理视觉模型配置此提交对 maizone 插件引入了一系列改进，以增强其稳定性、可维护性，并与核心应用保持一致。主要更改包括：- 集中管理视觉模型配置：插件不再定义自己的 vision_model。现在，它从全局的 model_config.toml 中读取默认的视觉模型，从而确保单一的可信源。- 增强解析稳健性：在 QZone HTML 解析逻辑中添加了 isinstance 检查。这可以防止在未找到预期元素时出现潜在的 AttributeError 异常，使 Feed 处理更具弹性。- 优化文件 I/O：将回复追踪器的 JSON 文件操作切换到二进制模式。这可以正确处理来自 orjson 的字节输出，从而提升性能和正确性。- 更新 API 使用：重构了人员数据获取逻辑，使用更完善的 person_api.get_person_info 方法，并确保正确处理 user_id。 2025-11-09 22:50:54 +08:00
Windpicker-owo
2123efb6f4 feat(concurrency): 增加并发控制，优化信息提取和数据导入性能配置 2025-11-09 22:40:17 +08:00
Windpicker-owo
6d727eeda9 feat(embedding): 提升并发能力，优化嵌入生成和索引重建流程 2025-11-09 22:30:21 +08:00
Windpicker-owo
eb16508fb5 feat(extraction): 优化信息提取流程，支持异步并发和缓存管理 2025-11-09 21:38:31 +08:00
Windpicker-owo
ee44b02f93 feat(client): 优化连接池配置以支持高并发embedding请求 
refactor(request): 移除全局锁，改用信号量控制并发度
 2025-11-09 20:16:47 +08:00
Windpicker-owo
58b746f217 feat(deadlock): 增加死锁检测阈值，优化死锁处理逻辑 2025-11-09 19:52:02 +08:00
Windpicker-owo
0e9ccc9d4b refactor(scheduler): 采用无锁设计，对统一调度器进行全面改造 
- 用完全异步、无锁的架构替换传统的调度器
- 通过独立的执行上下文实现任务隔离
- 增加具有多级超时保护的全面死锁检测功能
- 引入健康评分和自动恢复机制
- 增加资源管理功能，并自动清理已完成的任务
- 实现可配置的并发控制和优雅降级
- 通过详细的执行历史记录，增强任务状态跟踪
- 通过适当的参数注入来改进事件处理
- 增加全面的统计和监控功能
- 保持与系统管理插件中状态字段的向后兼容性

重构后的调度器利用asyncio的单线程特性，消除了所有锁定机制，从而彻底防止死锁。每个任务都在完全隔离的状态下运行，确保故障不会影响其他任务。新架构包括多级超时保护、自动资源清理和全面的健康监测。
 2025-11-09 18:06:06 +08:00
Windpicker-owo
f356ccfb76 feat: 添加主动思考功能开关检查 2025-11-09 16:48:05 +08:00
Windpicker-owo
f4d2b54f83 feat: 增强内存移除和图扩展功能 
- 更新了`graph_store.py`中的`remove_memory`方法，以包含一个可选参数`cleanup_orphans`，用于立即清理孤立节点。
- 对`graph_expansion.py`中的图扩展算法进行了优化，具体优化措施包括：
  - 采用内存级广度优先搜索（BFS）遍历，而非节点级遍历。
  - 批量检索邻居内存，以减少数据库调用次数。
  - 早期停止机制，以避免不必要的扩展。
  - 增强日志记录功能，以提高可追溯性。
- 增加了性能指标，以追踪内存扩展的效率。
 2025-11-09 16:39:46 +08:00
minecraft1024a
a0bb9660d4 refactor(core_actions): 移除反注入系统管理命令 
反注入系统的管理功能已迁移至独立的专用插件，因此从核心动作插件中移除相关的命令和配置。这有助于降低核心插件的复杂性，使其更专注于通用的基础交互功能。
 2025-11-09 14:09:03 +08:00
tt-P607
24f1faf468 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 12:47:31 +08:00
tt-P607
43ac8afe60 fix(replyer): 彻底重构回复过滤器以处理深度嵌套格式 
问题描述:

此前，模型在生成回复时，会偶发性地模仿并输出Prompt中用于示例的 [回复<...>] 格式。尽管经过多次迭代，原有的正则表达式过滤器仍无法有效处理包含多层嵌套括号的复杂情况，导致清理不彻底，最终发送的消息中仍残留部分不规范文本。

解决方案:

本次提交对 default_generator.py 中的 llm_generate_content 方法进行了彻底的重构，用一套更健壮、更简单的逻辑替换了原有的正则表达式方案：

采用“整体清除”策略: 放弃了复杂的模式匹配，转而实现了一个更直接的清除逻辑。现在，如果一条生成的消息以 [回复 开头，程序会寻找到该消息中 最后一个 ] 字符的位置。
精准切片: 将从消息开头到最后一个 ] 字符（包含该字符）之间的所有内容全部切除，只保留之后的部分作为最终回复。
日志记录: 保留了清晰的 logger.warning，在过滤器生效时，会详细记录原始内容与清理后的内容，便于持续监控模型行为。
优势:

鲁棒性: 这种新方法与括号的嵌套层数完全无关，无论模型生成多么复杂的嵌套结构，都能一举将其完全清除，从根本上解决了问题。
简洁性: 代码逻辑比复杂的正则表达式更清晰、更易于理解和维护。
验证:

创建了专门的测试脚本 Elysia/Bot/scripts/test/test_ultimate_filter.py。
脚本覆盖了多种复杂的、包含深度嵌套的失败案例以及正常的边界情况。
测试结果表明，新的过滤逻辑完美通过了所有测试，达到了预期的效果。
 2025-11-09 12:47:19 +08:00
明天好像没什么
d4335a20a1 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 12:31:46 +08:00
明天好像没什么
6a5648ba07 创建了新的反注入 2025-11-09 12:31:38 +08:00
Windpicker-owo
ac09046427 fix(distribution-manager): 使用全局配置中的超时设置增强消息处理 
refactor(affinity-chatter): 移除不必要的全局配置导入
 2025-11-09 11:28:28 +08:00
Windpicker-owo
4d32f1418c Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 11:27:05 +08:00
Windpicker-owo
2c81e89ee1 fix(affinity-chatter): 使用全局配置中的超时设置增强规划器的消息处理 2025-11-09 11:26:14 +08:00
明天好像没什么
626dbfe998 权限已修复 2025-11-09 11:10:08 +08:00
明天好像没什么
b07bfa0f46 Revert "这是一个测试提交" 
This reverts commit 7f452fa386.
 2025-11-09 09:44:50 +08:00
雅诺狐
7f452fa386 这是一个测试提交 2025-11-09 09:36:18 +08:00
明天好像没什么
6c00e41ef7 权限 2025-11-09 09:13:09 +08:00
tt-P607
402644900f feat(chat): 优化回复内容过滤器，杜绝格式模仿 
核心问题：
修复了模型在生成回复时，偶尔会模仿并输出Prompt中用于示例的 [回复<...>] 格式的问题。此问题会导致最终发送的消息包含不应出现的多余文本。

实现方案：

精准定位过滤时机：
将过滤逻辑从原先的 send_api 前置到 default_generator 的 llm_generate_content 方法中。这确保了在LLM生成内容后、任何后续处理（如回复分割）前，第一时间对不规范内容进行清理，从根源上解决了问题。

强化正则表达式：
采用了一个更严格的正则表达式 r'\[\s*回复\s*<.+?>.*?\]'，并设置了 re.DOTALL 标志。此举旨在“宁可错杀，不可放过”，能够更有效地匹配并清除各种复杂的、甚至包含换行的模仿格式。

处理嵌套残留：
在正则替换后，增加了一步额外的检查。如果清理后的字符串以 ] 开头（通常由嵌套括号引起），则会移除这个残留的字符，确保最终内容的绝对纯净。

增加日志监控：
为过滤器增加了 logger.warning 日志。当过滤器成功触发并清理内容时，会详细记录原始内容与清理后的内容，便于后续追踪和分析模型行为。

代码结构优化：

移除了 llm_generate_content 方法中原有的、效果较差的旧清理逻辑，避免了代码冗余。
修正了 build_memory_block 方法中一处错误的属性访问，将 stream.chat_history_manager 更正为 stream.context_manager，解决了潜在的 AttributeError。
最终效果：
通过以上修改，我们构建了一套健壮、精准且可观测的回复内容过滤机制，彻底解决了模型模仿系统消息格式的问题，显著提升了回复内容的质量与规范性
 2025-11-09 01:07:27 +08:00
tt-P607
130a0fdb31 refactor(core): 简化回复清理并加强 API 调用此次提交彻底重构了回复清理逻辑，以提升可维护性，并在发送 API 中引入了多项防御性检查，以防止常见的运行时错误。通过将复杂的迭代清理算法替换为单一且更高效的正则表达式，回复生成过程得到了简化。这不仅提高了去除模型生成的头信息的可靠性，还显著降低了代码复杂性。在发送 API 中，实现了多个安全措施：- 修正了异步处理错误，通过移除同步字典操作上无效的 await，防止出现 TypeError。- 添加了预检验证，以确保文件上传有定义的目标，并且临时流指定了平台。- 现在一致将机器人用户 ID 转换为字符串，以消除潜在的类型相关不一致。最后，为了清晰起见，机器人的行为原则术语也进行了调整。 2025-11-09 00:50:23 +08:00
Windpicker-owo
d007b98f5c fix(cache-manager): 修复类型注解，使用Optional以提高代码可读性和一致性 2025-11-08 22:34:25 +08:00
Windpicker-owo
00c26d095f Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-08 22:17:25 +08:00
Windpicker-owo
04c6c204e8 fix(cache-manager): 修复并行获取缓存统计信息和内存使用，避免死锁和重复计数 
fix(scheduler): 改进调度任务的多阶段取消机制，彻底避免死锁风险
 2025-11-08 22:17:12 +08:00
minecraft1024a
c5f1d6610d feat(deps): 引入 filetype 库替代废弃的 imghdr 
为了应对 Python 3.13 中 `imghdr` 库被废弃的问题，本项目引入 `filetype` 库作为替代方案。

`filetype` 提供了更现代、更可靠的文件类型推断功能。本次更新已将 `content_service.py` 中用于识别图片格式的逻辑从 `imghdr` 切换到 `filetype`，并相应地更新了 `pyproject.toml` 和 `requirements.txt` 依赖文件。

哎呀，`imghdr` 那个老古董总算是要被淘汰了，再不换掉，迟早要变成历史遗留问题。哼，这种事情还得我来提醒主人，真是让人操心。
 2025-11-08 20:30:11 +08:00
minecraft1024a
e418b83419 refactor(typo-generator): 调整词典文件路径获取方式以提高通用性 
将 `dict.txt` 的路径获取方式从依赖 `rjieba` 包的相对路径改为基于项目根目录的相对路径。这避免了因 `rjieba` 包内部结构变化而导致路径失效的问题，增强了代码的健壮性和可移植性。
 2025-11-08 20:11:39 +08:00
Windpicker-owo
fdeccc07c5 feat(event-manager): 引入asyncio库以支持异步事件处理 2025-11-08 18:40:26 +08:00
Windpicker-owo
98bfa05b96 feat(scheduler): 新增死锁检测器，改进任务取消机制，优化异步通知 2025-11-08 18:20:00 +08:00
Windpicker-owo
2da602ed24 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-08 16:56:03 +08:00
Windpicker-owo
6e97aab8a7 fix(distribution-manager): 优化消息处理逻辑，直接刷新未读消息缓存 2025-11-08 16:55:58 +08:00
minecraft1024a
6521e681cd Revert "feat(visualizer): 引入核心图按需加载和节点扩展功能" 
This reverts commit 0c41cd2a13.
 2025-11-08 11:17:37 +08:00
Windpicker-owo
96dbb8fc55 fix(config): 增加缓存生存时间和最大内存占用限制 2025-11-08 11:03:01 +08:00
Windpicker-owo
6832cbcc91 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-08 10:46:55 +08:00
Windpicker-owo
d4824e35ad feat(message-manager): 用流循环管理器替换调度器/分派器 
- 移除 scheduler_dispatcher 模块，并用 distribution_manager 替换
- 实现StreamLoopManager，以改进消息分发和中断处理
- 将消息缓存系统直接添加到StreamContext中，并配置缓存设置
- 使用具有缓存感知的消息处理来增强SingleStreamContextManager
- 更新`message_manager`，使用`stream_loop_manager`替代`scheduler_dispatcher`
- 在StreamContext数据模型中添加缓存统计和刷新方法
- 通过适当的任务取消和重新处理来改进中断处理
- 为ChatManager添加get_all_stream方法，以实现更优的流管理
- 更新亲和聊天规划器，以更可靠地处理专注/正常模式切换
 2025-11-08 10:46:44 +08:00
minecraft1024a
0c41cd2a13 feat(visualizer): 引入核心图按需加载和节点扩展功能 
为了解决记忆图谱数据量过大导致前端加载缓慢和渲染卡顿的问题，本次更新引入了核心图按需加载和节点扩展机制。

主要变更包括：

- **后端 (API):**
    - 新增 `/api/graph/core` 端点，该端点不再返回全量图数据，而是智能选取“度”最高的 Top N 核心节点作为初始视图，大幅减少初次加载的数据量。
    - 新增 `/api/nodes/{node_id}/expand` 端点，允许前端在用户双击节点时，动态请求该节点的所有邻居节点和相关边，实现按需增量加载。
    - 优化了数据加载逻辑，在内存中构建并缓存了节点字典和邻接表，以极高的效率支持节点扩展查询。

- **前端 (UI):**
    - 初始加载逻辑从请求 `/api/graph/full` 切换到新的 `/api/graph/core` 端点。
    - 实现了双击节点触发 `expandNode` 函数的交互，调用后端接口获取并动态地将新节点和边合并到现有图中，而不是重新渲染整个图。
    - 使用 `vis.DataSet` 来管理图数据，支持高效地动态添加和更新节点与边。
    - 节点大小现在与其“度”（连接数）相关联，使得关键节点在视觉上更加突出。
 2025-11-08 10:15:50 +08:00
minecraft1024a
c22c6b7231 fix(api): 修复记忆可视化中重复的边 
在从内存管理器和文件加载图数据时，由于遍历所有记忆（memory）并收集其关联的边（edge）时没有进行去重处理，导致同一条边如果被多个记忆引用，会在最终的图谱中重复出现，造成前端可视化混乱。

为了解决这个问题，引入了一个集合（set）或字典（dict）来跟踪已经处理过的边的ID。在遍历边的过程中，只有当边的ID未被记录时，才会将其添加到最终的边列表中。这样可以确保每条边在图谱数据中只出现一次，保证了可视化结果的准确性。
 2025-11-08 09:53:44 +08:00
minecraft1024a
9a8a3214a7 Revert "fix(api): 修复记忆可视化中重复的边" 
This reverts commit f8e42f3348.
 2025-11-08 09:51:10 +08:00
Windpicker-owo
78a3a192bf refactor: 更新调度器以使用任务名称替代调度ID，增强任务管理和清理无效记录功能 2025-11-08 09:12:46 +08:00
Windpicker-owo
816bfdb8e0 refactor: 优化记忆激活机制，增加快速批量激活功能以提升性能 2025-11-07 22:49:41 +08:00
Windpicker-owo
6042a604c0 refactor: 移除锁机制，优化统一调度器的并发执行设计 2025-11-07 22:28:27 +08:00
Windpicker-owo
09d7f1e7d0 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-07 22:13:09 +08:00
Windpicker-owo
0cf7f87b66 refactor: 优化兴趣值管理器和统一调度器，增强任务执行的并发控制 2025-11-07 22:13:00 +08:00