Commit Graph

7675 Commits

Author SHA1 Message Date
Windpicker-owo
8f668f18f7 feat:增强记忆节点的嵌入生成和日志记录- 在 MemoryBuilder 中为 SUBJECT 和 VALUE 节点类型添加了嵌入生成,确保仅为内容足够的节点创建嵌入。- 改进了 MemoryTools 的日志记录,在初始向量搜索期间提供详细见解,包括低召回情况的警告。- 调整了不同记忆类型的评分权重,以强调相似性和重要性,提高记忆检索的质量。- 将向量搜索限制从 2 倍提高到 5 倍,以改善初始召回率。- 引入了一个新脚本,用于为现有节点生成缺失的嵌入,支持批量处理并改进索引。 2025-11-19 23:37:19 +08:00
Windpicker-owo
a8fe969c70 feat(memory_tools): 添加优先节点类型支持,优化多查询生成与记忆扩展逻辑 2025-11-19 23:37:19 +08:00
Windpicker-owo
58ce93b265 feat(affinity_interest_calculator): 添加回复冷却减少功能,移除兴趣和关系分数上限 2025-11-19 23:37:18 +08:00
Windpicker-owo
d266419796 feat(exa_engine): 更新Exa搜索方法,优化搜索参数格式,增强结果处理逻辑
feat(url_parser): 精简Exa客户端参数,优化结果摘要处理逻辑
2025-11-19 23:37:18 +08:00
Windpicker-owo
940edccb4c feat(main): 移除数据库连接初始化方法,简化异步初始化流程 2025-11-19 23:37:17 +08:00
Windpicker-owo
b66e6800e8 feat(main): 移除知识库初始化,简化主系统启动流程 2025-11-19 23:37:13 +08:00
Windpicker-owo
3e8ef845e3 feat(context_manager): 移除消息添加和标记已读的日志记录,简化代码 2025-11-19 23:37:11 +08:00
Windpicker-owo
72e83b7d43 feat(distribution_manager): 在处理成功后添加短暂等待,确保清理操作完成
feat(message_manager): 简化清除未读消息逻辑,移除冗余注释
feat(action_manager): 移除自动清空未读消息的逻辑,改为手动处理
feat(plan_executor): 扩展回复类动作的分类,包含 respond 动作
2025-11-19 23:37:11 +08:00
Windpicker-owo
1f888c9986 feat(stream_loop_manager): 优化流循环管理,增强日志记录和错误处理,添加并发保护机制 2025-11-19 23:37:10 +08:00
Windpicker-owo
e6e6dedcb1 feat(message_manager): 增强清除未读消息逻辑,添加兜底保护以确保所有未读消息被标记为已读 2025-11-19 23:37:10 +08:00
Windpicker-owo
54aabc22c6 feat(context_manager): 添加消息处理日志,优化消息标记为已读的逻辑 2025-11-19 23:37:10 +08:00
Windpicker-owo
97fa09cada feat(chatter_manager): 清理 processing_message_id 以防止重复回复检测失效
feat(distribution_manager): 添加子任务跟踪和取消逻辑,优化流处理
feat(default_generator): 优化 respond 和 reply 模式下的消息处理逻辑
feat(affinity_chatter): 处理取消异常时清理 processing_message_id
feat(planner): 确保在规划流程取消时清理 processing_message_id
2025-11-19 23:37:09 +08:00
Windpicker-owo
dd43fccb94 feat(reply): 优化respond动作逻辑,移除不必要的目标消息参数 2025-11-19 23:37:06 +08:00
Windpicker-owo
875c4d5f2f feat(plan_filter): 添加动作参数过滤功能,移除多余参数以优化动作处理 2025-11-19 23:37:04 +08:00
Windpicker-owo
1066dc07dc feat(stream): 优化未读消息处理逻辑,避免无效的 chatter 调用 2025-11-19 23:37:04 +08:00
Windpicker-owo
ee16cf4427 feat(stream): 添加流循环启动锁以防止并发启动同一流的多个循环任务 2025-11-19 23:37:03 +08:00
Windpicker-owo
5d4ff6507a feat(reply): 引入统一格式过滤器,优化回复内容清理逻辑 2025-11-19 23:37:02 +08:00
Windpicker-owo
87f4b10959 feat(action): 将回复处理逻辑封装为异步函数,优化代码结构和可读性 2025-11-19 23:37:00 +08:00
Windpicker-owo
bec4f23ff5 feat(reply): 引入增强的格式过滤器,优化回复内容清理逻辑 2025-11-19 23:37:00 +08:00
Windpicker-owo
90ed6964b3 feat(reply): 引入 reply 和 respond 动作,优化消息回复机制
- 增加 reply 动作,针对单条消息进行深度回复,使用 s4u 模板。
- 增加 respond 动作,统一回应未读消息,使用 normal 模板。
- 更新核心动作插件以支持新动作,确保配置选项可用。
- 优化动作执行逻辑,提升对话流畅性和响应准确性。
2025-11-19 23:36:59 +08:00
tt-P607
b27b2e4811 refactor(maizone): 提高稳健性并集中管理视觉模型配置此提交对 maizone 插件引入了一系列改进,以增强其稳定性、可维护性,并与核心应用保持一致。主要更改包括:- 集中管理视觉模型配置:插件不再定义自己的 vision_model。现在,它从全局的 model_config.toml 中读取默认的视觉模型,从而确保单一的可信源。- 增强解析稳健性:在 QZone HTML 解析逻辑中添加了 isinstance 检查。这可以防止在未找到预期元素时出现潜在的 AttributeError 异常,使 Feed 处理更具弹性。- 优化文件 I/O:将回复追踪器的 JSON 文件操作切换到二进制模式。这可以正确处理来自 orjson 的字节输出,从而提升性能和正确性。- 更新 API 使用:重构了人员数据获取逻辑,使用更完善的 person_api.get_person_info 方法,并确保正确处理 user_id 2025-11-19 23:36:55 +08:00
Windpicker-owo
d971579e21 fix(emoji): 修正表情包分析提示中的描述和格式,增强分析准确性 2025-11-19 23:36:55 +08:00
Windpicker-owo
28035e18f1 feat(concurrency): 增加并发控制,优化信息提取和数据导入性能配置 2025-11-19 23:36:52 +08:00
Windpicker-owo
4344c88aed feat(embedding): 提升并发能力,优化嵌入生成和索引重建流程 2025-11-19 23:36:52 +08:00
Windpicker-owo
62414e865c feat(extraction): 优化信息提取流程,支持异步并发和缓存管理 2025-11-19 23:36:52 +08:00
Windpicker-owo
8d172867dc feat(client): 优化连接池配置以支持高并发embedding请求
refactor(request): 移除全局锁,改用信号量控制并发度
2025-11-19 23:36:39 +08:00
Windpicker-owo
3c5c951f94 feat(deadlock): 增加死锁检测阈值,优化死锁处理逻辑 2025-11-19 23:36:39 +08:00
Windpicker-owo
2269e693d9 refactor(scheduler): 采用无锁设计,对统一调度器进行全面改造
- 用完全异步、无锁的架构替换传统的调度器
- 通过独立的执行上下文实现任务隔离
- 增加具有多级超时保护的全面死锁检测功能
- 引入健康评分和自动恢复机制
- 增加资源管理功能,并自动清理已完成的任务
- 实现可配置的并发控制和优雅降级
- 通过详细的执行历史记录,增强任务状态跟踪
- 通过适当的参数注入来改进事件处理
- 增加全面的统计和监控功能
- 保持与系统管理插件中状态字段的向后兼容性

重构后的调度器利用asyncio的单线程特性,消除了所有锁定机制,从而彻底防止死锁。每个任务都在完全隔离的状态下运行,确保故障不会影响其他任务。新架构包括多级超时保护、自动资源清理和全面的健康监测。
2025-11-19 23:36:38 +08:00
Windpicker-owo
f4236c9ea7 feat: 添加主动思考功能开关检查 2025-11-19 23:36:38 +08:00
Windpicker-owo
f43a9a2938 feat: 增强内存移除和图扩展功能
- 更新了`graph_store.py`中的`remove_memory`方法,以包含一个可选参数`cleanup_orphans`,用于立即清理孤立节点。
- 对`graph_expansion.py`中的图扩展算法进行了优化,具体优化措施包括:
  - 采用内存级广度优先搜索(BFS)遍历,而非节点级遍历。
  - 批量检索邻居内存,以减少数据库调用次数。
  - 早期停止机制,以避免不必要的扩展。
  - 增强日志记录功能,以提高可追溯性。
- 增加了性能指标,以追踪内存扩展的效率。
2025-11-19 23:36:36 +08:00
minecraft1024a
34525a57fe refactor(core_actions): 移除反注入系统管理命令
反注入系统的管理功能已迁移至独立的专用插件,因此从核心动作插件中移除相关的命令和配置。这有助于降低核心插件的复杂性,使其更专注于通用的基础交互功能。
2025-11-19 23:36:36 +08:00
明天好像没什么
5d7d19625e 创建了新的反注入 2025-11-19 23:36:36 +08:00
tt-P607
1c83d3540c fix(replyer): 彻底重构回复过滤器以处理深度嵌套格式
问题描述:

此前,模型在生成回复时,会偶发性地模仿并输出Prompt中用于示例的 [回复<...>] 格式。尽管经过多次迭代,原有的正则表达式过滤器仍无法有效处理包含多层嵌套括号的复杂情况,导致清理不彻底,最终发送的消息中仍残留部分不规范文本。

解决方案:

本次提交对 default_generator.py 中的 llm_generate_content 方法进行了彻底的重构,用一套更健壮、更简单的逻辑替换了原有的正则表达式方案:

采用“整体清除”策略: 放弃了复杂的模式匹配,转而实现了一个更直接的清除逻辑。现在,如果一条生成的消息以 [回复 开头,程序会寻找到该消息中 最后一个 ] 字符的位置。
精准切片: 将从消息开头到最后一个 ] 字符(包含该字符)之间的所有内容全部切除,只保留之后的部分作为最终回复。
日志记录: 保留了清晰的 logger.warning,在过滤器生效时,会详细记录原始内容与清理后的内容,便于持续监控模型行为。
优势:

鲁棒性: 这种新方法与括号的嵌套层数完全无关,无论模型生成多么复杂的嵌套结构,都能一举将其完全清除,从根本上解决了问题。
简洁性: 代码逻辑比复杂的正则表达式更清晰、更易于理解和维护。
验证:

创建了专门的测试脚本 Elysia/Bot/scripts/test/test_ultimate_filter.py。
脚本覆盖了多种复杂的、包含深度嵌套的失败案例以及正常的边界情况。
测试结果表明,新的过滤逻辑完美通过了所有测试,达到了预期的效果。
2025-11-19 23:36:35 +08:00
Windpicker-owo
072d77a6ce fix(distribution-manager): 使用全局配置中的超时设置增强消息处理
refactor(affinity-chatter): 移除不必要的全局配置导入
2025-11-19 23:36:34 +08:00
明天好像没什么
be8574ac72 权限已修复 2025-11-19 23:36:34 +08:00
明天好像没什么
6f387a5b52 Revert "这是一个测试提交"
This reverts commit 7f452fa386.
2025-11-19 23:36:34 +08:00
雅诺狐
8bb2904437 这是一个测试提交 2025-11-19 23:36:33 +08:00
明天好像没什么
63f8b131b9 权限 2025-11-19 23:36:33 +08:00
tt-P607
460b73b3e2 feat(chat): 优化回复内容过滤器,杜绝格式模仿
核心问题:
修复了模型在生成回复时,偶尔会模仿并输出Prompt中用于示例的 [回复<...>] 格式的问题。此问题会导致最终发送的消息包含不应出现的多余文本。

实现方案:

精准定位过滤时机:
将过滤逻辑从原先的 send_api 前置到 default_generator 的 llm_generate_content 方法中。这确保了在LLM生成内容后、任何后续处理(如回复分割)前,第一时间对不规范内容进行清理,从根源上解决了问题。

强化正则表达式:
采用了一个更严格的正则表达式 r'\[\s*回复\s*<.+?>.*?\]',并设置了 re.DOTALL 标志。此举旨在“宁可错杀,不可放过”,能够更有效地匹配并清除各种复杂的、甚至包含换行的模仿格式。

处理嵌套残留:
在正则替换后,增加了一步额外的检查。如果清理后的字符串以 ] 开头(通常由嵌套括号引起),则会移除这个残留的字符,确保最终内容的绝对纯净。

增加日志监控:
为过滤器增加了 logger.warning 日志。当过滤器成功触发并清理内容时,会详细记录原始内容与清理后的内容,便于后续追踪和分析模型行为。

代码结构优化:

移除了 llm_generate_content 方法中原有的、效果较差的旧清理逻辑,避免了代码冗余。
修正了 build_memory_block 方法中一处错误的属性访问,将 stream.chat_history_manager 更正为 stream.context_manager,解决了潜在的 AttributeError。
最终效果:
通过以上修改,我们构建了一套健壮、精准且可观测的回复内容过滤机制,彻底解决了模型模仿系统消息格式的问题,显著提升了回复内容的质量与规范性
2025-11-19 23:36:33 +08:00
tt-P607
03fcc8043c refactor(core): 简化回复清理并加强 API 调用此次提交彻底重构了回复清理逻辑,以提升可维护性,并在发送 API 中引入了多项防御性检查,以防止常见的运行时错误。通过将复杂的迭代清理算法替换为单一且更高效的正则表达式,回复生成过程得到了简化。这不仅提高了去除模型生成的头信息的可靠性,还显著降低了代码复杂性。在发送 API 中,实现了多个安全措施:- 修正了异步处理错误,通过移除同步字典操作上无效的 await,防止出现 TypeError。- 添加了预检验证,以确保文件上传有定义的目标,并且临时流指定了平台。- 现在一致将机器人用户 ID 转换为字符串,以消除潜在的类型相关不一致。最后,为了清晰起见,机器人的行为原则术语也进行了调整。 2025-11-19 23:36:32 +08:00
Windpicker-owo
4e971ccb22 fix(affinity-chatter): 使用全局配置中的超时设置增强规划器的消息处理 2025-11-19 23:36:32 +08:00
Windpicker-owo
c4c7c4ccc8 fix(cache-manager): 修复类型注解,使用Optional以提高代码可读性和一致性 2025-11-19 23:36:31 +08:00
minecraft1024a
b76ccfe05b feat(deps): 引入 filetype 库替代废弃的 imghdr
为了应对 Python 3.13 中 `imghdr` 库被废弃的问题,本项目引入 `filetype` 库作为替代方案。

`filetype` 提供了更现代、更可靠的文件类型推断功能。本次更新已将 `content_service.py` 中用于识别图片格式的逻辑从 `imghdr` 切换到 `filetype`,并相应地更新了 `pyproject.toml` 和 `requirements.txt` 依赖文件。

哎呀,`imghdr` 那个老古董总算是要被淘汰了,再不换掉,迟早要变成历史遗留问题。哼,这种事情还得我来提醒主人,真是让人操心。
2025-11-19 23:36:31 +08:00
minecraft1024a
f46ebd9759 refactor(typo-generator): 调整词典文件路径获取方式以提高通用性
将 `dict.txt` 的路径获取方式从依赖 `rjieba` 包的相对路径改为基于项目根目录的相对路径。这避免了因 `rjieba` 包内部结构变化而导致路径失效的问题,增强了代码的健壮性和可移植性。
2025-11-19 23:36:31 +08:00
Windpicker-owo
ce558514c3 fix(cache-manager): 修复并行获取缓存统计信息和内存使用,避免死锁和重复计数
fix(scheduler): 改进调度任务的多阶段取消机制,彻底避免死锁风险
2025-11-19 23:36:30 +08:00
Windpicker-owo
e716dee371 feat(event-manager): 引入asyncio库以支持异步事件处理 2025-11-19 23:36:30 +08:00
Windpicker-owo
43d4aa3f0b feat(scheduler): 新增死锁检测器,改进任务取消机制,优化异步通知 2025-11-19 23:36:28 +08:00
minecraft1024a
73e564a378 Revert "feat(visualizer): 引入核心图按需加载和节点扩展功能"
This reverts commit 0c41cd2a13.
2025-11-19 23:36:27 +08:00
Windpicker-owo
fa61e38e15 fix(distribution-manager): 优化消息处理逻辑,直接刷新未读消息缓存 2025-11-19 23:36:27 +08:00
Windpicker-owo
9ffc26bec3 fix(config): 增加缓存生存时间和最大内存占用限制 2025-11-19 23:36:27 +08:00