gardel/Mofox-Core
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
1,858 Commits 1 Branch 0 Tags
1b93cc3d63b4e56972556e66d0d9a713d2e3a884
Commit Graph

801 Commits

Author SHA1 Message Date
Windpicker-owo
1b93cc3d63 feat(context_manager): 移除消息添加和标记已读的日志记录，简化代码 2025-11-10 21:55:16 +08:00
Windpicker-owo
f3af3caf71 feat(distribution_manager): 在处理成功后添加短暂等待，确保清理操作完成 
feat(message_manager): 简化清除未读消息逻辑，移除冗余注释
feat(action_manager): 移除自动清空未读消息的逻辑，改为手动处理
feat(plan_executor): 扩展回复类动作的分类，包含 respond 动作
 2025-11-10 21:38:55 +08:00
Windpicker-owo
c46df81bca feat(stream_loop_manager): 优化流循环管理，增强日志记录和错误处理，添加并发保护机制 2025-11-10 20:03:01 +08:00
Windpicker-owo
80819ad150 feat(message_manager): 增强清除未读消息逻辑，添加兜底保护以确保所有未读消息被标记为已读 2025-11-10 19:31:08 +08:00
Windpicker-owo
69ee2d30de feat(context_manager): 添加消息处理日志，优化消息标记为已读的逻辑 2025-11-10 19:18:30 +08:00
Windpicker-owo
aab3f19f10 feat(chatter_manager): 清理 processing_message_id 以防止重复回复检测失效 
feat(distribution_manager): 添加子任务跟踪和取消逻辑，优化流处理
feat(default_generator): 优化 respond 和 reply 模式下的消息处理逻辑
feat(affinity_chatter): 处理取消异常时清理 processing_message_id
feat(planner): 确保在规划流程取消时清理 processing_message_id
 2025-11-10 17:12:20 +08:00
Windpicker-owo
861cc18e7d feat(reply): 优化respond动作逻辑，移除不必要的目标消息参数 2025-11-10 16:07:23 +08:00
Windpicker-owo
dea45b083d feat(stream): 优化未读消息处理逻辑，避免无效的 chatter 调用 2025-11-10 15:18:40 +08:00
Windpicker-owo
e5c5e5c036 feat(stream): 添加流循环启动锁以防止并发启动同一流的多个循环任务 2025-11-10 14:23:10 +08:00
Windpicker-owo
b427960441 feat(reply): 引入统一格式过滤器，优化回复内容清理逻辑 2025-11-10 14:12:11 +08:00
Windpicker-owo
259a744a3b feat(action): 将回复处理逻辑封装为异步函数，优化代码结构和可读性 2025-11-10 13:44:52 +08:00
Windpicker-owo
882f93c886 feat(reply): 引入增强的格式过滤器，优化回复内容清理逻辑 2025-11-10 13:36:17 +08:00
Windpicker-owo
8c4a54c75d feat(reply): 引入 reply 和 respond 动作，优化消息回复机制 
- 增加 reply 动作，针对单条消息进行深度回复，使用 s4u 模板。
- 增加 respond 动作，统一回应未读消息，使用 normal 模板。
- 更新核心动作插件以支持新动作，确保配置选项可用。
- 优化动作执行逻辑，提升对话流畅性和响应准确性。
 2025-11-10 13:24:45 +08:00
Windpicker-owo
2422e4d186 fix(emoji): 修正表情包分析提示中的描述和格式，增强分析准确性 2025-11-10 09:52:51 +08:00
Windpicker-owo
6d727eeda9 feat(embedding): 提升并发能力，优化嵌入生成和索引重建流程 2025-11-09 22:30:21 +08:00
tt-P607
24f1faf468 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 12:47:31 +08:00
tt-P607
43ac8afe60 fix(replyer): 彻底重构回复过滤器以处理深度嵌套格式 
问题描述:

此前，模型在生成回复时，会偶发性地模仿并输出Prompt中用于示例的 [回复<...>] 格式。尽管经过多次迭代，原有的正则表达式过滤器仍无法有效处理包含多层嵌套括号的复杂情况，导致清理不彻底，最终发送的消息中仍残留部分不规范文本。

解决方案:

本次提交对 default_generator.py 中的 llm_generate_content 方法进行了彻底的重构，用一套更健壮、更简单的逻辑替换了原有的正则表达式方案：

采用“整体清除”策略: 放弃了复杂的模式匹配，转而实现了一个更直接的清除逻辑。现在，如果一条生成的消息以 [回复 开头，程序会寻找到该消息中 最后一个 ] 字符的位置。
精准切片: 将从消息开头到最后一个 ] 字符（包含该字符）之间的所有内容全部切除，只保留之后的部分作为最终回复。
日志记录: 保留了清晰的 logger.warning，在过滤器生效时，会详细记录原始内容与清理后的内容，便于持续监控模型行为。
优势:

鲁棒性: 这种新方法与括号的嵌套层数完全无关，无论模型生成多么复杂的嵌套结构，都能一举将其完全清除，从根本上解决了问题。
简洁性: 代码逻辑比复杂的正则表达式更清晰、更易于理解和维护。
验证:

创建了专门的测试脚本 Elysia/Bot/scripts/test/test_ultimate_filter.py。
脚本覆盖了多种复杂的、包含深度嵌套的失败案例以及正常的边界情况。
测试结果表明，新的过滤逻辑完美通过了所有测试，达到了预期的效果。
 2025-11-09 12:47:19 +08:00
明天好像没什么
d4335a20a1 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-09 12:31:46 +08:00
明天好像没什么
6a5648ba07 创建了新的反注入 2025-11-09 12:31:38 +08:00
Windpicker-owo
ac09046427 fix(distribution-manager): 使用全局配置中的超时设置增强消息处理 
refactor(affinity-chatter): 移除不必要的全局配置导入
 2025-11-09 11:28:28 +08:00
tt-P607
402644900f feat(chat): 优化回复内容过滤器，杜绝格式模仿 
核心问题：
修复了模型在生成回复时，偶尔会模仿并输出Prompt中用于示例的 [回复<...>] 格式的问题。此问题会导致最终发送的消息包含不应出现的多余文本。

实现方案：

精准定位过滤时机：
将过滤逻辑从原先的 send_api 前置到 default_generator 的 llm_generate_content 方法中。这确保了在LLM生成内容后、任何后续处理（如回复分割）前，第一时间对不规范内容进行清理，从根源上解决了问题。

强化正则表达式：
采用了一个更严格的正则表达式 r'\[\s*回复\s*<.+?>.*?\]'，并设置了 re.DOTALL 标志。此举旨在“宁可错杀，不可放过”，能够更有效地匹配并清除各种复杂的、甚至包含换行的模仿格式。

处理嵌套残留：
在正则替换后，增加了一步额外的检查。如果清理后的字符串以 ] 开头（通常由嵌套括号引起），则会移除这个残留的字符，确保最终内容的绝对纯净。

增加日志监控：
为过滤器增加了 logger.warning 日志。当过滤器成功触发并清理内容时，会详细记录原始内容与清理后的内容，便于后续追踪和分析模型行为。

代码结构优化：

移除了 llm_generate_content 方法中原有的、效果较差的旧清理逻辑，避免了代码冗余。
修正了 build_memory_block 方法中一处错误的属性访问，将 stream.chat_history_manager 更正为 stream.context_manager，解决了潜在的 AttributeError。
最终效果：
通过以上修改，我们构建了一套健壮、精准且可观测的回复内容过滤机制，彻底解决了模型模仿系统消息格式的问题，显著提升了回复内容的质量与规范性
 2025-11-09 01:07:27 +08:00
tt-P607
130a0fdb31 refactor(core): 简化回复清理并加强 API 调用此次提交彻底重构了回复清理逻辑，以提升可维护性，并在发送 API 中引入了多项防御性检查，以防止常见的运行时错误。通过将复杂的迭代清理算法替换为单一且更高效的正则表达式，回复生成过程得到了简化。这不仅提高了去除模型生成的头信息的可靠性，还显著降低了代码复杂性。在发送 API 中，实现了多个安全措施：- 修正了异步处理错误，通过移除同步字典操作上无效的 await，防止出现 TypeError。- 添加了预检验证，以确保文件上传有定义的目标，并且临时流指定了平台。- 现在一致将机器人用户 ID 转换为字符串，以消除潜在的类型相关不一致。最后，为了清晰起见，机器人的行为原则术语也进行了调整。 2025-11-09 00:50:23 +08:00
minecraft1024a
e418b83419 refactor(typo-generator): 调整词典文件路径获取方式以提高通用性 
将 `dict.txt` 的路径获取方式从依赖 `rjieba` 包的相对路径改为基于项目根目录的相对路径。这避免了因 `rjieba` 包内部结构变化而导致路径失效的问题，增强了代码的健壮性和可移植性。
 2025-11-08 20:11:39 +08:00
Windpicker-owo
6e97aab8a7 fix(distribution-manager): 优化消息处理逻辑，直接刷新未读消息缓存 2025-11-08 16:55:58 +08:00
Windpicker-owo
d4824e35ad feat(message-manager): 用流循环管理器替换调度器/分派器 
- 移除 scheduler_dispatcher 模块，并用 distribution_manager 替换
- 实现StreamLoopManager，以改进消息分发和中断处理
- 将消息缓存系统直接添加到StreamContext中，并配置缓存设置
- 使用具有缓存感知的消息处理来增强SingleStreamContextManager
- 更新`message_manager`，使用`stream_loop_manager`替代`scheduler_dispatcher`
- 在StreamContext数据模型中添加缓存统计和刷新方法
- 通过适当的任务取消和重新处理来改进中断处理
- 为ChatManager添加get_all_stream方法，以实现更优的流管理
- 更新亲和聊天规划器，以更可靠地处理专注/正常模式切换
 2025-11-08 10:46:44 +08:00
Windpicker-owo
78a3a192bf refactor: 更新调度器以使用任务名称替代调度ID，增强任务管理和清理无效记录功能 2025-11-08 09:12:46 +08:00
Windpicker-owo
0cf7f87b66 refactor: 优化兴趣值管理器和统一调度器，增强任务执行的并发控制 2025-11-07 22:13:00 +08:00
Windpicker-owo
ff5d14042c 修复: 更新消息分发管理器以提高性能和稳定性 2025-11-07 21:16:58 +08:00
Windpicker-owo
b8f1a5ba22 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-07 21:16:45 +08:00
Windpicker-owo
3e6b6458bb refactor(scheduler): 移除不必要的 schedule 锁管理代码 2025-11-07 21:15:13 +08:00
明天好像没什么
c8d7c09625 ruff 2025-11-07 21:01:45 +08:00
yishan
973070ddb5 Merge pull request #55 from SolenmeChiara/dev 
Dev - Fix: 主程序部分核心功能修复集合
 2025-11-07 18:58:05 +08:00
Windpicker-owo
befb8ad3f6 refactor: 优化嵌入生成逻辑，失败时返回 None，简化错误处理；更新调度器任务管理逻辑 2025-11-07 18:09:28 +08:00
Windpicker-owo
ba30a52e32 chore: 更新项目版本至0.12.0，添加aiofiles依赖；优化调度器任务执行逻辑，避免重复触发 2025-11-07 17:38:50 +08:00
拾风
1ab042813d Merge branch 'dev' into dev 2025-11-07 13:14:27 +08:00
Windpicker-owo
023fab73a5 feat(memory): 更新记忆管理和配置，优化整合逻辑，添加语义相似度阈值 2025-11-06 23:56:18 +08:00
Windpicker-owo
d75476d41c feat: 增强聊天回复生成器，添加参与者信息和聊天历史处理逻辑 2025-11-06 15:15:53 +08:00
Windpicker-owo
ffdd4c6b9c feat(tool_history): 实现流工具历史管理器，以增强工具调用跟踪和缓存- 添加了 StreamToolHistoryManager，用于管理聊天流级别的工具调用历史。- 引入了 ToolCallRecord，用于详细记录工具调用，包括执行时间和缓存命中情况。- 集成了内存缓存和全局缓存系统，以高效检索结果。- 更新了 ToolExecutor，以使用新的历史管理器记录和获取工具调用。- 增强了 ExaSearchEngine，以限制返回结果数量并提升答案质量。- 重构了 CacheManager 中的缓存管理，以包括工具调用统计和性能指标。 2025-11-06 14:22:59 +08:00
Windpicker-owo
17c1d4b4f9 feat: 将 JSON 处理库从 json 更改为 orjson，以提高性能和兼容性 2025-11-06 12:47:56 +08:00
Windpicker-owo
f87e8627e5 feat(memory): 移除传统内存系统并优化内存图谱 
- 移除整个传统内存系统，包括内存系统模块及所有相关组件
- 删除弃用的内存组件：增强型内存激活器、海马体采样器、内存构建器、内存块、内存遗忘引擎、内存格式器、内存融合器、内存管理器、内存元数据索引、内存查询规划器、内存系统、消息集合处理器、消息集合存储、向量内存存储_v2
- 更新内存图配置，采用增强型检索设置
- 优化内存管理器查询功能，以分析完整对话上下文
- 更新机器人配置模板版本至7.6.1，新增内存图表检索参数

重大变更：旧版内存系统已被完全移除。所有内存功能现依赖于内存图系统。请更新配置以包含新的内存图检索参数。
 2025-11-06 09:18:59 +08:00
Windpicker-owo
faca0d3d1b feat: 重构聊天系统的内存处理与格式化功能 
- 更新了DefaultReplyer，采用新的内存格式化工具以提供更优质的内存描述。
- 已移除 Config 类中已弃用的内存配置。
- 在主系统中增强内存系统初始化检查，确保配置正确。
- 优化了MemoryManager，使其可直接使用全局配置进行内存设置。
- 新增了一个内存格式化工具，用于将内存对象转换为自然语言描述。
- 更新了内存工具，提供了更清晰的内存创建与管理指南。
- 精炼插件工具与使用提示，提升用户交互体验与记忆准确性。
- 根据内存系统结构的变化调整了机器人配置模板。
 2025-11-06 08:47:18 +08:00
Windpicker-owo
c3ca811e46 feat(memory): 添加智能查询优化，移除瞬时记忆处理 
重大改进:
- 在 MemoryManager 中添加 optimize_search_query 方法
- 使用小模型优化搜索查询，提高检索精确度
- search_memories 新增 optimize_query 和 context 参数
- 移除瞬时记忆处理（由其他系统负责）

技术实现:
- 使用 utils_small 模型优化查询语句
- 自动提取查询核心意图和关键信息
- 支持上下文感知（聊天历史、发言人）
- 失败时自动降级到原始查询

查询优化流程:
1. 提取聊天历史和发言人信息
2. 构建查询上下文
3. 调用小模型生成优化查询
4. 使用优化查询进行语义搜索
5. 返回相关记忆

default_generator.py 调整:
- 移除瞬时记忆处理逻辑
- 调用 manager.search_memories 时传入 context
- 启用 optimize_query 参数
 2025-11-05 19:31:07 +08:00
Windpicker-owo
cd15c51e6b refactor(memory): 完全移除旧记忆系统，全面切换到新记忆图系统 
重大变更:
- 移除 default_generator.py 中对旧增强记忆系统的所有调用
- 移除 prompt.py 中的记忆构建函数
- 记忆检索全面使用新记忆图系统
- 禁用旧记忆系统的自动存储逻辑

记忆构建流程:
- 记忆创建: LLM 通过 create_memory 工具主动创建
- 记忆检索: default_generator.py 自动检索
- 记忆传递: 通过 pre_built_params 传入 prompt

工具可用性:
- CreateMemoryTool: available_for_llm = True
- LinkMemoriesTool: available_for_llm = False
- SearchMemoriesTool: available_for_llm = False

技术细节:
- 提高记忆检索数量 top_k=10
- 降低重要性阈值 min_importance=0.3
- 修复类型错误和警告
 2025-11-05 19:22:34 +08:00
Windpicker-owo
edd74bed9f feat(memory-graph): Step 2 - 集成记忆检索到提示词生成 
- 修改 build_memory_block 方法，添加记忆图系统检索
- 在提示词构建时自动从记忆图系统中检索相关记忆
- 合并增强记忆系统和记忆图系统的检索结果
- 更新记忆格式化代码以使用合并后的记忆列表

技术细节:
- 使用 manager_singleton 获取全局记忆管理器
- 调用 search_memories 检索相关记忆 (top_k=5, min_importance=0.5)
- 将记忆格式化为兼容的数据结构并合并到 all_memories
- 保持与现有增强记忆系统的兼容性

测试验证:
- 成功创建测试记忆并检索
- 不同查询能找到相应的相关记忆
- 记忆图系统可正常被提示词生成器调用
 2025-11-05 18:53:32 +08:00
Windpicker-owo
25c50f759f fix(chat): 增强对自我身份的识别，支持将机器人用户标记为"SELF" 2025-11-05 14:45:36 +08:00
Windpicker-owo
57475b475d feat(config): 添加消息缓存系统配置和表达方式过期天数设置 
feat(expression_learner): 实现清理过期表达方式功能
fix(context_manager): 根据配置检查消息缓存系统启用状态
 2025-11-05 11:54:07 +08:00
SolenmeChiara
6d37514c34 fix(bot): 修复adapter_response被echo检查拦截的严重bug 
问题：
- Napcat发送adapter_response时同时设置了echo=True
- 原逻辑先检查echo，导致adapter_response消息被提前return
- Maizone获取Cookie等功能完全失效（超时40秒）

修复：
- 将adapter_response检查移到echo检查之前
- 确保adapter_response消息优先处理
- 移除重复的adapter_response检查逻辑

影响：
- Maizone插件现在可以正确获取QQ空间Cookie
- 所有adapter命令响应都能正常工作

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-04 22:08:58 -05:00
SolenmeChiara
06ed1cbae6 chore: 恢复PR改动并适配官方最新版本 
在官方更新到4936a6d后，选择性恢复PR中的功能改动：

Maizone插件修复（6个文件）:
- 优化成功/失败反馈机制（直接反馈，不使用AI生成）
- 实现QQ空间Cookie失效自动重试机制
- 修复评论回复被分割导致标点符号丢失的问题
- 修复QQ空间转发内容提取错误
- 改进maizone图片识别模型配置，支持自动fallback
- 优化maizone说说生成规则

适配器响应处理（bot.py）:
- 添加adapter_response消息处理逻辑
- 适配新的DatabaseMessages架构
- 在message_process早期阶段优先处理adapter_response

Web搜索引擎扩展:
- 添加Serper搜索引擎支持

LLM成本计算修复:
- 修复LLM使用统计中成本计算错误的bug
- 调整LLM相关日志级别为DEBUG

其他优化:
- 优化NapCat adapter响应处理
- 优化person_info关系推理逻辑

注：本次恢复已跳过与官方冲突的部分，保留官方的新架构改进

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-04 22:08:58 -05:00
Windpicker-owo
26ae2c5b8e fix(scheduler): 优化调度创建逻辑，处理完成后检查缓存消息以决定是否创建新调度 2025-11-05 00:00:38 +08:00
Windpicker-owo
99f71d1bcf fix(scheduler): 添加锁机制以避免调度创建/删除的竞态条件 2025-11-04 23:44:27 +08:00