Commit Graph

12 Commits

Author SHA1 Message Date
ikun-11451
72e7492953 依旧修pyright喵~ 2025-11-29 21:26:42 +08:00
Windpicker-owo
2bd7e93af7 fix: 更新数据库会话管理,确保事务在正常退出时自动提交,并在异常时安全回滚 2025-11-28 13:24:41 +08:00
Windpicker-owo
43483b934e feat: 更新机器人配置并添加数据库迁移脚本
- 将bot_config_template.toml中的版本升级至7.9.0
- 增强数据库配置选项以支持PostgreSQL
- 引入一个新脚本,用于在SQLite、MySQL和PostgreSQL之间迁移数据
- 实现一个方言适配器,用于处理特定于数据库的行为和配置
2025-11-27 18:45:01 +08:00
Windpicker-owo
0908fb50a0 优化日志 2025-11-26 21:16:16 +08:00
Windpicker-owo
98bfa05b96 feat(scheduler): 新增死锁检测器,改进任务取消机制,优化异步通知 2025-11-08 18:20:00 +08:00
Windpicker-owo
96dbb8fc55 fix(config): 增加缓存生存时间和最大内存占用限制 2025-11-08 11:03:01 +08:00
明天好像没什么
c8d7c09625 ruff 2025-11-07 21:01:45 +08:00
Windpicker-owo
4e2b598164 feat(cache): 提升内存管理与监控能力
- 在CacheManager中添加健康监控系统,并提供详细的内存统计信息
- 使用新的memory_utils模块实现精确的内存估算
- 添加基于大小的缓存条目限制,以防止过大项目
- 通过去重内存计算优化缓存统计
- 在MultiLevelCache中添加过期条目的自动清理功能
- 增强批处理调度器缓存功能,支持LRU驱逐策略和内存追踪
- 更新配置以支持最大项目大小限制
- 添加全面的内存分析文档和工具

重大变更:CacheManager 的默认 TTL 参数现改为 None 而非 3600。数据库兼容层默认禁用缓存,以防止旧版代码过度使用缓存。
2025-11-03 15:18:00 +08:00
明天好像没什么
30658afdb4 ruff归零 2025-11-01 21:32:41 +08:00
明天好像没什么
cb97b2d8d3 rufffffff 2025-11-01 21:10:01 +08:00
Windpicker-owo
2aeb06f708 fix: 修复批处理中的多次commit问题,bulk_create后清除缓存 2025-11-01 17:31:31 +08:00
Windpicker-owo
f7bb8058a8 feat(database): 完成优化层实现 - 自适应批量调度器
- batch_scheduler.py: 全新的自适应批量调度器
  * AdaptiveBatchScheduler: 核心调度引擎
  * 自适应批次: 10-100动态调整,根据负载优化
  * 优先级队列: LOW/NORMAL/HIGH/URGENT四级优先级
  * 智能等待: 50-200ms动态调整,平衡吞吐和延迟
  * 超时保护: 防止操作长时间阻塞
  * 拥塞控制: 实时监控队列状态,自动调节

- 性能优化算法:
  * 批次自适应: congestion > 0.7  增大批次
  * 等待时间调整: duration > 2*wait  增加等待
  * 缓存集成: 5秒TTL,减少重复查询

- 批量执行能力:
  * SELECT: 智能合并相似查询
  * INSERT: 批量插入,减少事务开销
  * UPDATE/DELETE: 单条执行但复用会话

- 统计监控:
  * 吞吐量: 总操作数/批处理数
  * 性能: 平均批次大小/执行时间
  * 质量: 缓存命中率/超时率/错误率
  * 拥塞: 实时拥塞评分(0-1)

 优化层三大组件全部完成:
  1. MultiLevelCache - L1+L2两级缓存
  2. DataPreloader - 智能预加载引擎
  3. AdaptiveBatchScheduler - 自适应批处理

预期性能提升:
- 查询响应: 减少60% (缓存+预加载)
- 写入吞吐: 提升300% (批量处理)
- 数据库负载: 降低50% (连接复用+批处理)
2025-11-01 12:50:43 +08:00