gardel/Mofox-Core
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
4,878 Commits 1 Branch 0 Tags
74d022c489ecd2a087d0531f7795c5974d278eaa
Commit Graph

284 Commits

Author SHA1 Message Date
BuildTools
14a70496f7 feat(chat): 增强prompt构建功能并优化回复逻辑 
- 为HfcContext和ChatStream添加focus_energy配置支持
- 修复默认回复生成器中识别自身消息的逻辑
- 完整实现prompt构建中的表达习惯、记忆、工具信息和知识模块
- 优化错误处理，使用原生异常链式传递
- 确保数据库操作中focus_energy字段的持久化

这些改进提升了聊天系统的上下文感知能力和回复质量，同时增强了模块的健壮性和可维护性。
 2025-11-19 23:00:13 +08:00
tt-P607
08dc99ae51 feat(chat): 为回复分割器添加 llm 与 punctuation 模式 
本次更新重构了回复分割功能，引入了 `split_mode` 配置项，允许用户在两种分割模式之间进行选择，提供了更大的灵活性。

- **`llm` 模式**: 延续了由大语言模型通过 `[SPLIT]` 标记决定断句的功能。此模式下的提示词（Prompt）已进一步优化，以引导模型做出更自然的分割。
- **`punctuation` 模式**: 恢复了传统的基于标点符号的分割逻辑。这已设为新的默认模式，确保用户更新后行为与旧版本保持一致。

此外，`at_user` 插件也进行了适配，以正确处理由 `llm` 模式可能产生的多段消息。
 2025-11-19 22:59:56 +08:00
tt-P607
97e566b893 feat(chat): 实现由 LLM 控制的自然回复分割 
之前基于标点符号的自动分割逻辑较为僵硬，有时会破坏回复的连贯性，导致对话体验不佳。

本次更新引入了一种由 LLM 主导的回复分割机制：
1.  在 Prompt 中增加了明确的分割指令，引导 LLM 在需要模拟人类对话停顿或转折时，使用 `[SPLIT]` 标记。
2.  后端回复处理逻辑相应更新，优先根据 `[SPLIT]` 标记分割消息。
3.  若 LLM 未提供 `[SPLIT]` 标记，则将整段回复作为单条消息发送，避免了不必要的拆分。

此项改动旨在让消息的发送节奏更贴近真实人类的聊天习惯，从而提升交互的自然感和流畅度。
 2025-11-19 22:59:48 +08:00
minecraft1024a
796daf8ddc Revert "feat(chat): 实现发送错别字后自动撤回修正的功能" 
This reverts commit fd5d951501.
 2025-11-19 22:58:56 +08:00
minecraft1024a
185e6aad0b Revert "refactor(chat): 优化错别字生成器逻辑与文档" 
This reverts commit ceee3c1fbf.
 2025-11-19 22:58:54 +08:00
minecraft1024a
33e8e054c9 refactor(chat): 优化错别字生成器逻辑与文档 
对中文错别字生成器（`ChineseTypoGenerator`）进行了大规模重构和改进，以提升代码的可读性、可维护性和生成质量。

主要变更包括：
- **逻辑拆分**: 将核心的单字替换逻辑从主函数 `create_typo_sentence` 中提取到新的私有方法 `_char_replace`，使主流程更清晰。
- **文档增强**: 全面重写和丰富了所有主要方法的文档字符串（docstrings），详细解释了每个参数的用途、函数的内部工作原理和设计决策，显著提高了代码的可理解性。
- **代码简化**: 优化了同音词的查找逻辑（`_get_word_homophones`），移除了复杂的评分和文件读取过程，直接利用 `jieba.dt.FREQ` 进行有效性验证，使代码更简洁高效。
- **健壮性提升**: 在拼音转换和处理逻辑中增加了更具体的异常捕获（`IndexError`, `TypeError`），提高了代码的稳定性。
- **修正建议格式**: 将修正建议的返回格式从单个字符串更改为 `(错字/词, 正确字/词)` 的元组，提供了更完整的上下文信息。

此外，在 `generator_api.py` 中移除了一段冗余的内容类型检查代码。
 2025-11-19 22:58:54 +08:00
minecraft1024a
304fc9f74c fix(chat): 修复 kaomoji 恢复函数的参数类型 
在之前的重构中，`recover_kaomoji` 函数的调用被简化，但在此处调用时忘记移除数组包裹，导致传递了错误的参数类型。此提交删除了多余的方括号，确保将字符串直接传递给 `recover_kaomoji` 函数。
 2025-11-19 22:58:45 +08:00
minecraft1024a
2784e59a36 refactor(chat): 简化 kaomoji 恢复函数的参数传递 
将 `recover_kaomoji` 函数的调用从传递列表 `[s["..."]]` 改为直接传递字符串 `s["..."]`。此更改简化了代码，并与函数预期的输入类型保持一致，提高了代码的可读性和健壮性。
 2025-11-19 22:58:44 +08:00
minecraft1024a
c75d53a6b5 fix(chat): 修复错别字修正功能中的 kaomoji 恢复逻辑 
在处理类型为 "typo" 的句子时，`recover_kaomoji` 函数的调用方式有误。原先代码将 `s["correction"]` 包装在列表中 (`[s["correction"]]`) 进行传递，这与函数的预期输入不符，可能导致在修正错别字时无法正确恢复 kaomoji 表情。

本次提交移除了不必要的列表包装，确保将 `s["correction"]` 直接传递给 `recover_kaomoji` 函数，从而修正了该问题。
 2025-11-19 22:58:44 +08:00
minecraft1024a
89fad16e0e feat(chat): 实现发送错别字后自动撤回修正的功能 
引入了一个新的聊天交互机制：当机器人发送了包含“错别字”的消息后，会在短暂延迟后自动撤回该消息，并发送正确的版本。此功能旨在模拟更真实的人类打字行为，增加交互的趣味性和拟人化程度。

主要变更：
- **错别字处理流程**:
  - `ResponseHandler`现在会识别出带有错别字的消息，并在发送后创建一个异步任务来处理后续的修正。
  - 新增`handle_typo_correction`方法，该方法会随机延迟2-4秒，然后调用新的`recall_message` API撤回原消息，并重新发送修正后的内容。
- **API扩展**:
  - `send_api`中增加了`recall_message`函数，用于调用适配器执行消息撤回操作。
  - `send_response`的返回值从单个字符串`reply_text`变更为元组`(reply_text, sent_messages)`，以便将已发送的消息信息（包括ID和类型）传递给上层调用者。
- **数据结构调整**:
  - `process_llm_response`的返回类型从`list[str]`调整为`list[dict[str, str]]`，以支持更复杂的响应类型，如包含原文、错别字和修正建议的`typo`类型。
- **代码优化与重构**:
  - 对`ChineseTypoGenerator`进行了大量的代码清理、注释补充和逻辑优化，使其代码更清晰、更易于维护。
  - 修复了多处代码中的类型注解和潜在的空指针问题，提高了代码的健壮性。
 2025-11-19 22:58:42 +08:00
Windpicker-owo
2bfb3a151c 修复一堆新prompt的bug 2025-11-19 22:58:26 +08:00
Windpicker-owo
3980509caa refactor(prompt): 重构并统一提示词系统 
- 删除旧的智能提示词系统（smart_prompt.py）和相关参数模块（prompt_parameters.py）
- 将 prompt_builder.py 重命名为 prompt.py 并精简功能
- 更新所有模块的导入路径从 `src.chat.utils.prompt_builder` 到 `src.chat.utils.prompt`
- 统一提示词构建接口，使用新的 PromptContext 替代 SmartPromptParameters
- 移除重复和冗余代码，简化系统架构

BREAKING CHANGE: 旧的 SmartPrompt 系统已被完全移除，所有相关模块需要改用新的统一 Prompt 系统
 2025-11-19 22:58:17 +08:00
minecraft1024a
2e436dff33 rrrrrrrrrrrrrruuuuuuuuuuuuuuuuuuuuffffffffffffffffffffffffff 2025-11-19 22:57:45 +08:00
minecraft1024a
d66e04baff chore: format code and remove redundant blank lines 
This commit applies automated code formatting across the project. The changes primarily involve removing unnecessary blank lines and ensuring consistent code style, improving readability and maintainability without altering functionality.
 2025-11-19 22:57:44 +08:00
minecraft1024a
b8d31207cb refactor(chat): 抽象化跨群聊上下文构建逻辑 
将 `build_cross_context` 方法的实现委托给 `cross_context_api`。
这简化了 `prompt_utils` 中的代码，将复杂的上下文构建逻辑（包括获取其他群聊、根据模式获取和格式化消息）封装到专用的API中，提高了代码的模块化和可维护性。
 2025-11-19 22:57:29 +08:00
Windpicker-owo
57ba493a74 fix:修复图片识别爆炸 2025-11-19 22:57:22 +08:00
tt-P607
2dbce6a738 feat(chat): 添加图片消息判断工具函数 
增加 `is_image_message` 函数，用于根据消息字典的内容判断该消息是否为图片类型。这有助于在处理不同消息类型时，能够准确识别并分流图片消息。
 2025-11-19 22:57:03 +08:00
Windpicker-owo
d86cfa90ad 迁移：3804124，9e9e796 
（feat：将no_reply内置、fix：优化reply，填补缺失值）
 2025-11-19 22:56:51 +08:00
Windpicker-owo
fe472dff60 修复代码格式和文件名大小写问题 2025-11-19 22:55:55 +08:00
Windpicker-owo
a187130613 refactor(chat): 简化SmartPrompt系统架构，移除缓存机制和依赖检查 2025-11-19 22:54:35 +08:00
Windpicker-owo
649a010078 refactor(chat): 重构SmartPrompt系统简化架构并移除缓存机制 
- 简化SmartPromptParameters类结构，移除复杂的分层参数架构
- 统一错误处理和降级机制，增强系统稳定性
- 移除缓存相关功能，简化架构并减少复杂性
- 完全继承DefaultReplyer功能，确保功能完整性
- 优化性能和依赖管理，改进并发任务处理
- 增强跨群上下文、关系信息、记忆系统等功能的错误处理
- 统一视频分析结果注入逻辑，避免重复代码
 2025-11-19 22:54:35 +08:00
Windpicker-owo
e8e401f656 refactor(chat): 重构SmartPrompt系统使用分层参数架构和共享工具 
将SmartPrompt系统从平面参数结构重构为分层架构，引入PromptCoreParams、
PromptFeatureParams和PromptContentParams三个层级，提高代码组织性和可维护性。

主要变更：
- 使用新的分层参数结构替代原有的平面参数系统
- 集成PromptUtils共享工具类，消除代码重复
- 添加性能优化：缓存机制、超时控制和性能监控
- 增强错误处理，提供优雅的降级机制
- 添加SmartPromptHealthChecker用于系统健康检查
- 保持向后兼容性，通过属性访问器维持现有API

此重构显著提升了代码的可维护性、性能和可测试性，同时为未来功能
扩展奠定了更好的架构基础。
 2025-11-19 22:54:34 +08:00
Windpicker-owo
202a5016b0 feat(chat): 重构SmartPrompt系统完全继承DefaultReplyer功能 
完成SmartPrompt系统的全面重构，现已完整继承原有DefaultReplyer的复杂提示构建逻辑：
- 新增SmartPromptParameters涵盖所有必需参数并向后兼容
- 实现s4u/normal/minimal三种模式的完整支持
- 集成原有的表达式习惯、记忆块、关系信息等构建逻辑
- 重构缓存系统使用统一稳定的缓存键机制
- DefaultReplyer现已完整迁移到SmartPrompt架构且零API变更

BREAKING CHANGE: SmartPrompt系统现在完全可用，可以安全替换原有提示构建系统
 2025-11-19 22:54:32 +08:00
Windpicker-owo
dfa2d8a438 feat(chat): 引入SmartPrompt智能提示构建系统 
重构DefaultReplyer对话提示构建逻辑，统一使用SmartPrompt抽象组件替代原冗长的模板选择与参数拼装流程。将原160+行的分支式模板处理逻辑压缩为统一的SmartPrompt.build_prompt()调用，实现提示构建策略的可插拔与可维护性提升。

- 新增 src.chat.utils.smart_prompt 模块（SmartPrompt类及参数封装）
- 移除旧的normal/s4u分支硬编码，由SmartPrompt内部按需适配
- 事件管理器仅补充HandlerResult显式导入，无功能变动
 2025-11-19 22:54:32 +08:00
tt-P607
2a5513b546 feat(video): 引入Python降级抽帧并重构视频分析逻辑 
- 当Rust视频处理模块不可用时，自动降级使用基于OpenCV的Python传统抽帧实现，确保视频分析功能在不同环境下均可用。
- 重构`extract_frames`方法，使其能够根据配置的抽帧模式（keyframe, time_interval, fixed_number）和可用的模块（Rust, Python）智能选择最佳的实现路径。
- 增强了初始化检查逻辑，现在会同时检测Rust和OpenCV的可用性，并根据检测结果提供更准确的日志警告或错误信息。
- 更新了`is_video_analysis_available`和`get_video_analysis_status`函数，以准确反映当前可用的视频处理实现和支持的抽帧模式。
 2025-11-19 22:54:23 +08:00
Windpicker-owo
a3c07fb0f1 rust_video依赖检测 2025-11-19 22:53:57 +08:00
雅诺狐
0aabd49375 Remove rust-video keyframe extraction API and related files 
Deleted the entire src/chat/utils/rust-video directory, including Rust and Python source files, configuration, and documentation. Updated utils_video.py, official_configs.py, and bot_config_template.toml to remove or adjust references to the removed rust-video module. This cleans up the codebase by removing the integrated Rust-based keyframe extraction API and its supporting infrastructure.
 2025-11-19 22:50:03 +08:00
Furina-1013-create
b9e8dbcd9f 初步上传基于rust的后端视频关键帧抽帧处理源文件以及readme 
但是api还未完成接入
 2025-11-19 22:50:03 +08:00
minecraft1024a
d4ba286855 refactor(core): remove tool history manager and integrate cache into tool executor 
Removes the `ToolHistoryManager` and its associated functionalities, including history recording, querying, and prompt generation. This simplifies the architecture by decoupling tool execution history from the core logic.

The tool caching mechanism is now directly integrated into the `ToolExecutor` by wrapping the `execute_tool_call` method. This ensures that caching is applied consistently for all tool executions that have it enabled, improving performance and reducing redundant calls.

- Deletes `src/common/tool_history.py`.
- Removes tool history related functions from `prompt_builder.py` and `tool_api.py`.
- Adds a `wrap_tool_executor` function in `cache_manager.py` to apply caching logic directly to the `ToolExecutor`.
 2025-11-19 22:49:38 +08:00
minecraft1024a
e7fa3d79ff Reapply "【迁移】工具系统再完善：工具缓存、ttl支持、自动记录、长期保存、自动清理缓存、将记录与执行分离、api记录查询、时间聊天工具筛选查询..." 
This reverts commit 3d93bc4079.
 2025-11-19 22:48:31 +08:00
tt-P607
700c8dfa6f fix(chat): 处理截断消息时message为None的情况 
在 `truncate_message` 函数中，如果传入的 `message` 参数为 `None`，会导致 `len(message)` 抛出 `TypeError`。本次提交增加了对 `None` 值的检查，确保在处理 `None` 时函数能正常返回空字符串，从而提高代码的健壮性。
 2025-11-19 22:48:27 +08:00
Windpicker-owo
e068663ef9 Revert "【迁移】工具系统再完善：工具缓存、ttl支持、自动记录、长期保存、自动清理缓存、将记录与执行分离、api记录查询、时间聊天工具筛选查询..." 
This reverts commit 80ab0c687c.
 2025-11-19 22:48:24 +08:00
Windpicker-owo
adfacd883c 【迁移】工具系统再完善：工具缓存、ttl支持、自动记录、长期保存、自动清理缓存、将记录与执行分离、api记录查询、时间聊天工具筛选查询... 2025-11-19 22:48:23 +08:00
minecraft1024a
dd9aecea14 feat(maizone): 新增QQ空间互通组功能，根据聊天上下文生成说说 
引入了全新的“QQ空间互通组”功能。用户可以配置多个群聊为一个互通组。
在通过指令发布说说时，系统会自动获取这些群聊的近期聊天记录作为上下文，从而生成与当前讨论话题更相关的说说内容。

- 在 `config.toml` 中新增了 `[maizone_intercom]` 配置项用于定义互通组。
- 重构并增强了动态（说说）的拉取逻辑，提高了对不同数据格式的兼容性和解析的稳定性。
- 对项目中的多个文件进行了代码清理，移除了未使用的导入，使代码更加整洁。
 2025-11-19 22:48:02 +08:00
雅诺狐
ab3a36bfa7 全面更换orjson 2025-11-19 22:47:10 +08:00
Furina-1013-create
613ef82328 这个不会改视频识别的入来优化了一下视频识别的prompt，狐狐大佬补药鞭挞我呜呜呜~ 
同步改进bot配置文件模板（这回没有忘记改版本号了）
 2025-11-19 22:46:37 +08:00
雅诺狐
82f7ae5d73 更新版本号 2025-11-19 22:46:29 +08:00
雅诺狐
c92e2a4230 feat(video): 添加按时间间隔的帧提取模式并重构配置读取逻辑 
- 新增 time_interval 帧提取模式，支持按指定时间间隔提取视频帧
- 重构 VideoAnalyzer 初始化代码，使用 getattr 统一获取配置参数
- 简化配置读取逻辑，移除冗余的 try-catch 结构
- 优化 _extract_frames_worker 函数参数，支持新的提取模式配置
 2025-11-19 22:46:28 +08:00
雅诺狐
56efa7a462 Delete video_worker.py 2025-11-19 22:46:27 +08:00
雅诺狐
8735bfbc88 feat: 添加视频处理多线程优化和消息切片重组功能 
- 新增视频帧提取的线程池支持，提升大视频文件处理性能
- 集成消息切片重组器，支持长消息的自动重组处理
- 优化视频帧提取算法，使用numpy进行数值计算优化
- 重构权限管理插件，修复属性访问和方法签名问题
- 清理未使用的导入和代码，提升代码质量
- 默认启用插件管理功能
 2025-11-19 22:46:27 +08:00
tt-P607
89bee8db90 feat(video): 新增按时间间隔抽帧模式 
增加了按时间间隔提取视频帧的新模式，与原有的固定总帧数模式并存。用户现在可以通过配置文件选择最适合其需求的抽帧方式。

- 新增 `frame_extraction_mode` 配置项，可选值为 "fixed_number" (固定总帧数) 或 "time_interval" (按时间间隔)。
- 新增 `frame_interval_seconds` 配置项，用于指定时间间隔模式下的抽帧秒数。
- `max_frames` 配置项现在仅在 "fixed_number" 模式下生效。
- 更新了 `VideoAnalyzer` 类以支持两种抽帧逻辑，并从配置中读取新参数。
- 相应地更新了配置文件模板 `bot_config_template.toml`。
 2025-11-19 22:46:19 +08:00
雅诺狐
34252ea4a0 refactor: 清理代码质量和移除未使用文件 
- 移除未使用的导入语句和变量
- 修复代码风格问题（空格、格式化等）
- 删除备份文件和测试文件
- 改进异常处理链式调用
- 添加权限系统数据库模型和配置
- 更新版本号至6.4.4
- 优化SQL查询使用正确的布尔表达式
 2025-11-19 22:46:18 +08:00
雅诺狐
e39c34f366 fix: 修复视频分析并发处理和数据库存储问题 
🔧 修复视频分析模块的关键并发和存储问题

**主要修复:**
1. **并发竞争条件修复**
   - 解决相同视频hash同时处理导致重复分析的问题
   - 重构并发控制机制，使用per-video独立锁和事件
   - 消除30秒超时后多个请求同时执行的竞争条件

2. **数据库存储优化**
   - 移除Videos表path字段的复杂唯一性检查逻辑
   - 简化为基于hash的纯唯一标识存储
   - 修复path字段重复导致的IntegrityError

3. **代码简化和清理**
   - 删除重编码视频检测功能（复杂且用处有限）
   - 移除不必要的特征匹配和计数更新逻辑
   - 简化存储路径生成，统一使用hash前缀

Fixes: 视频并发处理竞争条件、数据库存储冲突、聊天循环变量错误
 2025-11-19 22:46:11 +08:00
雅诺狐
1b9c86abef Refactor web search plugin and clean up code 
Refactored the web search plugin by removing the old Bing search implementation and reorganizing the plugin structure. Introduced modular search engine classes under 'web_search_tool/engines' and utility tools under 'web_search_tool/tools' and 'web_search_tool/utils'. Updated references and initialization logic to support multiple search engines and improved maintainability. Also performed minor code cleanups and replaced 'except ...: pass' with 'except ...: ...' for brevity.
 2025-11-19 22:45:42 +08:00
雅诺狐
90f5e2357e Improve anti-injector status handling and statistics 
Moved statistics update to only occur when the anti-injector system is enabled. Enhanced statistics reporting to handle disabled state and improved uptime calculation to use session start time. Updated status command to provide clearer feedback when the anti-injector system is disabled or when errors occur. Also fixed a docstring in prompt_builder.py for clarity.
 2025-11-19 22:45:03 +08:00
minecraft1024a
a31ee1ab5f refactor(video): update config key from utils_video to video_analysis 2025-11-19 22:44:56 +08:00
minecraft1024a
7d13d0b6c2 fix(embedding): 彻底解决事件循环冲突导致的嵌入生成异常 
通过以下改动修复嵌入生成过程中的事件循环相关问题：
- 在 EmbeddingStore._get_embedding 中，改为同步创建-使用-销毁的新事件循环模式，彻底避免嵌套事件循环问题
- 调整批量嵌入 _get_embeddings_batch_threaded，确保每个线程使用独立、短生命周期的事件循环
- 新增 force_new 参数，LLM 请求嵌入任务时强制创建新的客户端实例，减少跨循环对象复用
- 在 OpenAI 客户端的 embedding 调用处补充详细日志，方便排查网络连接异常
- get_embedding() 每次都重建 LLMRequest，降低实例在多个事件循环中穿梭的概率

此次改动虽然以同步风格“硬掰”异步接口，但对现有接口零破坏，确保了向量数据库及相关知识检索功能的稳定性。(还有就是把的脚本文件夹移回来了)
 2025-11-19 22:44:54 +08:00
雅诺狐
bb4592846c Refactor config system to use Pydantic validation 
Refactored configuration classes to inherit from a new ValidatedConfigBase using Pydantic for robust validation and error reporting. Updated api_ada_configs.py, config.py, config_base.py, and official_configs.py to replace dataclasses with Pydantic models, add field validation, and improve error messages. This change enhances configuration reliability and developer feedback for misconfigurations. Also includes minor code cleanups and removal of unused variables in other modules.
 2025-11-19 22:44:45 +08:00
雅诺狐
383f704b53 Remove unused imports across multiple modules 
Cleaned up various files by removing unused or redundant import statements to improve code readability and reduce potential confusion. No functional changes were made.
 2025-11-19 22:44:32 +08:00
minecraft1024a
793c6e3817 fix(statistic): 修复统计任务中因数据库记录格式问题导致的异常 
在处理来自数据库的记录时，增加对记录类型的检查和时间戳格式的转换。确保即使记录不是预期的字典格式，或者时间戳字段为None或字符串格式，程序也能够安全处理，避免因`TypeError`或`AttributeError`导致整个统计任务中断(说真的这都一天了为什么还没人修)
 2025-11-19 22:42:24 +08:00