gardel/Mofox-Core
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
8,027 Commits 1 Branch 0 Tags
gitea
Commit Graph

33 Commits

Author SHA1 Message Date
雅诺狐
3edcc9d169 ruff 2025-12-08 15:48:40 +08:00
tt-P607
659a8e0d78 refactor(api, chat): 改进异步处理并解决并发问题 
内存可视化器 API 端点之前在异步路由中执行同步的阻塞操作（文件 I/O、数据处理）。在处理大型图文件时，这可能导致服务器冻结。现在，这些任务已被移至 ThreadPoolExecutor，从而使 API 非阻塞并显著提高响应速度。

在聊天消息管理器中，竞争条件可能导致消息处理重叠或中断后数据流停滞。此提交引入了：
- 并发锁（`is_chatter_processing`）以防止流循环同时运行多个 chatter 实例。
- 故障保护机制，在中断时重置处理状态，确保数据流能够恢复并正确继续。
 2025-12-02 14:40:58 +08:00
ikun-11451
311a161941 喵呜！修好了好多 Pyright 的报错捏~ 🐾 
主人主人，猫猫把代码里的红红的报错都赶跑啦！✨
1. memory_visualizer_router.py: 把 load_graph_data_from_file 变成异步的啦，这样就不会卡住咯~
2. message_router.py: 加上了 global_config 的检查，不会再因为空空的配置摔倒啦！
3. emoji_manager.py: 修复了好多类型转换的问题，还加上了配置检查，表情包系统更稳定了捏！
4. energy_manager.py: 能量计算器的类型也修好啦，统计数据不会再打架了~

代码现在变得干干净净的，猫猫是不是很棒？快摸摸头！🐱💕
 2025-11-29 20:03:29 +08:00
Windpicker-owo
0908fb50a0 优化日志 2025-11-26 21:16:16 +08:00
Windpicker-owo
c268ea2fb2 修复ChatStream循环导入问题 2025-11-25 20:29:48 +08:00
minecraft1024a
6a5af6f69e refactor(api): 移除内存可视化路由的 API 密钥依赖 
该路由旨在用于本地调试和可视化，不再需要进行 API 密钥认证。

BREAKING CHANGE: 内存可视化路由现在是公开访问的，不再需要 API 密钥。
 2025-11-16 12:45:27 +08:00
minecraft1024a
42f0e0e023 feat(plugin_system): 引入插件HTTP端点系统 
引入了全新的 `BaseRouterComponent` 组件类型，允许插件开发者通过继承并实现 `register_endpoints` 方法来创建 FastAPI 路由。

- 插件系统现在可以自动发现并注册这些路由组件，并将它们挂载到主 FastAPI 应用的 `/plugins/<plugin_name>` 前缀下。
- 新增了全局配置 `[plugin_http_system]`，提供了总开关、API 速率限制和 API 密钥认证 (`X-API-Key`) 等功能，以确保端点的安全性和稳定性。
- 更新了 `hello_world_plugin` 插件，增加了一个简单的 `/greet` 端点作为实现示例。
 2025-11-16 12:41:35 +08:00
minecraft1024a
14d37160c5 feat(api): 整合消息统计接口并增加来源筛选 
将 `/messages/bot_stats_by_chat` 的功能合并到 `/messages/stats_by_chat` 接口中，以减少冗余并统一API。

- 为 `/messages/stats_by_chat` 接口新增 `source` 查询参数，允许按 'user' (用户) 或 'bot' (机器人) 筛选消息来源。
- `group_by_user` 参数现在仅在 `source='user'` 时生效。
- 对内部逻辑进行了重构，以支持新的筛选功能并提升代码可读性。

BREAKING CHANGE: 移除了 `/messages/bot_stats_by_chat` 接口。其功能已整合到 `/messages/stats_by_chat` 接口中，可通过设置查询参数 `source='bot'` 来实现。
 2025-11-14 13:00:44 +08:00
tt-P607
9a4ce76584 Merge branch 'dev' of https://github.com/MoFox-Studio/MoFox_Bot into dev 2025-11-13 19:43:18 +08:00
tt-P607
6bc71b0d3f feat(visualizer): 在图上实现内存搜索和节点高亮显示 
这增强了内存可视化工具，使其具有强大的搜索和高亮功能。

后端 API（`/api/search`）现在会返回搜索结果中与每个内存相关的节点 ID。错误响应也已改进，以确保前端数据结构的一致性。

前端逻辑已进行了重大更新：
- 搜索时，现在会直观地高亮显示对应的节点及其连接的边。
- 不匹配的元素会被调暗，以将用户的注意力集中在搜索结果上。
- 智能处理结果不在当前视图中的情况（由于分页/聚类）或使用没有节点 ID 的旧数据时，为用户提供提示信息。
 2025-11-13 19:42:26 +08:00
Windpicker-owo
84013783ca feat(visualizer): 增加可渲染节点和边的最大限制，提高图形处理能力 2025-11-13 17:26:45 +08:00
Windpicker-owo
10f5b7d037 feat(persistence): 实现异步保存图存储以提高性能和响应性 2025-11-13 12:02:38 +08:00
minecraft1024a
0e1e9935b2 style: 统一代码风格并采用现代化类型注解 
对整个代码库进行了一次全面的代码风格清理和现代化改造，主要包括：

- 移除了所有文件中多余的行尾空格。
- 将类型提示更新为 PEP 585 和 PEP 604 引入的现代语法（例如，使用 `list` 代替 `List`，使用 `|` 代替 `Optional`）。
- 清理了多个模块中未被使用的导入语句。
- 移除了不含插值变量的冗余 f-string。
- 调整了部分 `__init__.py` 文件中的 `__all__` 导出顺序，以保持一致性。

这些改动旨在提升代码的可读性和可维护性，使其与现代 Python 最佳实践保持一致，但未修改任何核心逻辑。
 2025-11-12 12:49:40 +08:00
Windpicker-owo
e2236f5bc1 feat:增强记忆节点的嵌入生成和日志记录- 在 MemoryBuilder 中为 SUBJECT 和 VALUE 节点类型添加了嵌入生成，确保仅为内容足够的节点创建嵌入。- 改进了 MemoryTools 的日志记录，在初始向量搜索期间提供详细见解，包括低召回情况的警告。- 调整了不同记忆类型的评分权重，以强调相似性和重要性，提高记忆检索的质量。- 将向量搜索限制从 2 倍提高到 5 倍，以改善初始召回率。- 引入了一个新脚本，用于为现有节点生成缺失的嵌入，支持批量处理并改进索引。 2025-11-11 19:25:03 +08:00
minecraft1024a
6521e681cd Revert "feat(visualizer): 引入核心图按需加载和节点扩展功能" 
This reverts commit 0c41cd2a13.
 2025-11-08 11:17:37 +08:00
minecraft1024a
0c41cd2a13 feat(visualizer): 引入核心图按需加载和节点扩展功能 
为了解决记忆图谱数据量过大导致前端加载缓慢和渲染卡顿的问题，本次更新引入了核心图按需加载和节点扩展机制。

主要变更包括：

- **后端 (API):**
    - 新增 `/api/graph/core` 端点，该端点不再返回全量图数据，而是智能选取“度”最高的 Top N 核心节点作为初始视图，大幅减少初次加载的数据量。
    - 新增 `/api/nodes/{node_id}/expand` 端点，允许前端在用户双击节点时，动态请求该节点的所有邻居节点和相关边，实现按需增量加载。
    - 优化了数据加载逻辑，在内存中构建并缓存了节点字典和邻接表，以极高的效率支持节点扩展查询。

- **前端 (UI):**
    - 初始加载逻辑从请求 `/api/graph/full` 切换到新的 `/api/graph/core` 端点。
    - 实现了双击节点触发 `expandNode` 函数的交互，调用后端接口获取并动态地将新节点和边合并到现有图中，而不是重新渲染整个图。
    - 使用 `vis.DataSet` 来管理图数据，支持高效地动态添加和更新节点与边。
    - 节点大小现在与其“度”（连接数）相关联，使得关键节点在视觉上更加突出。
 2025-11-08 10:15:50 +08:00
minecraft1024a
c22c6b7231 fix(api): 修复记忆可视化中重复的边 
在从内存管理器和文件加载图数据时，由于遍历所有记忆（memory）并收集其关联的边（edge）时没有进行去重处理，导致同一条边如果被多个记忆引用，会在最终的图谱中重复出现，造成前端可视化混乱。

为了解决这个问题，引入了一个集合（set）或字典（dict）来跟踪已经处理过的边的ID。在遍历边的过程中，只有当边的ID未被记录时，才会将其添加到最终的边列表中。这样可以确保每条边在图谱数据中只出现一次，保证了可视化结果的准确性。
 2025-11-08 09:53:44 +08:00
minecraft1024a
9a8a3214a7 Revert "fix(api): 修复记忆可视化中重复的边" 
This reverts commit f8e42f3348.
 2025-11-08 09:51:10 +08:00
minecraft1024a
f8e42f3348 fix(api): 修复记忆可视化中重复的边 
在从文件或内存管理器加载图数据时，由于遍历所有记忆（memory）并将其包含的边（edge）添加到列表中，导致了边的重复。当多个记忆共享同一条边时，这条边会被多次添加到最终的边列表中，造成前端可视化图中出现冗余的连接。

此提交通过引入一个集合（set）或字典（dict）来跟踪已经处理过的边的 ID，确保每条边只被添加一次，从而解决了重复边的问题。
 2025-11-07 22:03:09 +08:00
minecraft1024a
077628930b refactor(server): 将记忆可视化工具和统计功能整合进主服务 
将原先独立的记忆可视化工具（Memory Visualizer）和LLM使用统计逻辑深度整合到项目主服务中。

主要变更包括：
- **移除独立的可视化工具**: 删除了 `tools/memory_visualizer` 目录下的所有独立服务器、脚本和文档，清理了项目结构。
- **API路由整合**: 在主 FastAPI 应用中注册了记忆可视化工具的路由，使其成为核心功能的一部分，可通过 `/visualizer` 访问。
- **统计逻辑重构**: 将LLM使用统计的计算逻辑从API路由层 `statistic_router.py` 中剥离，迁移到 `src/chat/utils/statistic.py` 中，实现了逻辑的解耦和复用。API路由现在直接调用重构后的统计任务。
- **依赖清理与添加**: 添加了 `jinja2` 作为模板渲染的依赖，并清除了与独立可视化工具相关的旧依赖。

此次重构简化了项目的维护和部署，将原本分散的功能统一管理，提升了代码的内聚性和可维护性。
 2025-11-07 21:12:11 +08:00
Windpicker-owo
a1dc03cacc refactor: 完成数据库重构 - 批量更新导入路径 
- 更新35个文件的导入路径 (共65处修改)
- sqlalchemy_models  core.models (模型类)
- sqlalchemy_database_api  compatibility (兼容函数)
- database.database  core (初始化/关闭函数)
- 添加自动化导入更新工具 (scripts/update_database_imports.py)
- 所有兼容性层测试通过 (26/26)
- 数据库核心功能测试通过 (18/21)
 2025-11-01 14:22:54 +08:00
明天好像没什么
7b80d7c0b3 feat(plugin): 集成 MCP 协议支持并优化代码风格 
- 新增 fastmcp 依赖，支持通过 Streamable HTTP 连接外部工具服务器
- 在 component_registry 与 tool_api 中实现 MCP 工具加载、注册及调用链路
- 补充 README 中的 MCP 特性说明
- 统一修复多处 import 顺序、空行、引号及类型注解，提升代码整洁度
- 在 pyproject.toml 中忽略 PERF203 规则，允许循环内异常处理
- 优化语音缓存与本地 ASR 调用逻辑，减少冗余代码
 2025-10-26 13:10:31 +08:00
minecraft1024a
b4210f614a refactor(api): 重构 LLM 统计数据收集逻辑 
将原有的方式重构为直接从数据库中查询和聚合 LLM 使用记录。这提高了数据的持久性和准确性，并消除了对后台统计任务的依赖。

主要变更：
- 移除旧的 `StatisticOutputTask` 和基于 Redis 的统计变量。
- 新增 `_collect_stats_in_period` 函数，用于在指定时间段内从 `LLMUsage` 表中动态收集和计算统计数据。
- 统计时，将数据库中存储的实际模型标识符（model_identifier）映射回配置文件中的模型名称，确保成本计算和数据显示的一致性。
- 扩展了 `period_type` 查询参数，增加了如 "last_hour", "last_24_hours", "last_7_days" 等多个预设时间范围，提升了 API 的易用性。
 2025-10-25 14:57:09 +08:00
minecraft1024a
fa58b0e999 feat(api): 增加 LLM 统计路由 
将 LLM 使用情况统计的 API 路由注册到主应用程序中，以便通过 `/api/statistic` 路径访问相关统计数据。
 2025-10-25 14:27:08 +08:00
sunbiz1024
8f4f7d19af ruff 2025-10-06 09:38:16 +08:00
minecraft1024a
2c74b472ab style: 统一代码风格并进行现代化改进 
对整个代码库进行了一次全面的风格统一和现代化改进。主要变更包括：

- 将 `hasattr` 等内置函数中的字符串参数从单引号 `'` 统一为双引号 `"`。
- 采用现代类型注解，例如将 `Optional[T]` 替换为 `T | None`，`List[T]` 替换为 `list[T]` 等。
- 移除不再需要的 Python 2 兼容性声明 `# -*- coding: utf-8 -*-`。
- 清理了多余的空行、注释和未使用的导入。
- 统一了文件末尾的换行符。
- 优化了部分日志输出和字符串格式化 (`f"{e!s}"`)。

这些改动旨在提升代码的可读性、一致性和可维护性，使其更符合现代 Python 编码规范。
 2025-10-05 13:21:27 +08:00
minecraft1024a
f06fac2dc9 fix(api): 修复机器人消息统计计数器逻辑 
chore(logging): 移除 message_manager 各模块多余的启动日志

- 修复了 `get_bot_message_stats_by_chat` 接口中错误地将计数器重置为1而不是递增的问题。
- 清理了 `message_manager` 及其子模块中重复或不必要的启动日志，以减少日志冗余。
 2025-10-04 21:04:49 +08:00
minecraft1024a
46d6acfdcc feat(api): 新增机器人消息统计接口 
新增 `/messages/bot_stats_by_chat` 端点，用于统计机器人在指定天数内按聊天会话（群聊或私聊）发送的消息数量。

该接口支持以下功能：
- 通过 `days` 参数指定查询的时间范围。
- 通过 `format` 参数选择是否在结果中包含会话名称，以提高可读性。
 2025-10-04 13:18:07 +08:00
minecraft1024a
b4dffde3f0 refactor(api): 简化消息统计和会话名称获取逻辑 
- 移除 `get_message_stats_by_chat` 中冗余的 `sent` 和 `received` 统计，只保留 `total` 计数，简化了统计逻辑。
- 优化了获取会话名称的方式，直接从 `chat_manager` 的 `streams` 中查找，统一了群聊和私聊的处理流程，提高了代码的可读性和效率。
- 删除了一个不再需要的测试日志。
 2025-10-04 13:14:15 +08:00
minecraft1024a
346353670d feat(api): 增强消息统计接口，支持格式化输出 
为 `/messages/stats/by_chat` 端点添加了一个新的 `format` 查询参数。当 `format=True` 时，API 响应将包含更友好的信息，如群聊名称和用户昵称，而不仅仅是 ID。

这通过集成 `chat_api` 和 `person_api` 来获取相应的会话和用户信息，从而提高了接口的可用性和数据可读性。
 2025-10-04 13:09:48 +08:00
minecraft1024a
7d9bfb7fca feat(api): 新增按聊天流统计消息的API端点 
新增了一个API端点 `/messages/stats_by_chat`，用于根据指定的天数统计消息数据。该端点支持按聊天流进行分组，并提供了按用户进一步分组以及过滤机器人自身消息的选项。

主要功能包括：
- 按指定天数范围查询消息。
- 按聊天流（chat_id）聚合统计数据，包括总消息数、发送数和接收数。
- 可选地按用户（user_id）在每个聊天流内进行分组统计。
- 可选地过滤掉机器人自身发送的消息。
 2025-10-04 12:57:43 +08:00
minecraft1024a
19c37280d4 feat(api): 新增消息统计API端点 
将原有的获取最近消息的API替换为功能更强大的消息统计API。
新的 `/messages/recent` 端点允许按天数和消息类型（发送、接收或全部）查询机器人的消息数量统计。
- 支持 `days` 和 `message_type` 查询参数。
- 实现统计逻辑，区分机器人发送和接收的消息。
- 增加异常处理，提高API的健壮性。
 2025-10-03 20:43:07 +08:00
ikun-11451
09a17e5c12 增加了后端api喵~ 2025-10-03 20:21:56 +08:00