PicoBot/docs/CHANGELOG.md

# 变更日志

本文件记录 Picobot 各版本的显著变更，遵循 [Keep a Changelog](https://keepachangelog.com/zh-CN/1.1.0/) 风格。

## [0.3.2] - 2026-08-06

较 [0.3.1] 的 7 个 commit 迭代，聚焦 **上下文压缩可配置化**、**网关安全加固**、**并发模型优化** 与 **错误防御性提升** 四大方向。

### 新增功能

#### 压缩算法关键参数暴露到设置页面
- 将 4 个上下文压缩参数从硬编码提取到 `config.json` 顶层 `compaction` 节：
  - `threshold_ratio`（0.7）：工程化压缩触发阈值，占 `context_window` 的比例
  - `llm_compaction_threshold_ratio`（0.5）：LLM 压缩触发阈值
  - `truncate_max_tokens`（100）：工程化压缩时 tool 结果截断到的 token 数
  - `preserve_count`（5）：LLM 三段压缩保留最旧/最新的 unit 数
- 前端新增"上下文压缩"设置标签页（Archive 图标），4 个 number input 分两组展示。
- `ContextCompressor` 内聚所有压缩参数，新增 `with_compaction_config()` 构造函数和 `truncate_tool_results()` 方法。
- `AgentLoop` 通过调用 `compressor.truncate_tool_results()` 实现零参数耦合，压缩参数变更仅影响 `ContextCompressor`。

#### HTTP API 认证与 CORS 防护
- 新增 HTTP API 认证机制，未授权请求直接返回 401。
- CORS 防护：明确指定允许的 origin，阻止跨域未授权访问。
- 修复密钥泄露风险：敏感信息不再出现在错误响应中。

### 改进

#### 上下文压缩重构为两阶段+双阈值+三段保留
- **两阶段压缩**：工具调用完成后触发压缩流程，先用 `prompt_tokens` 判断 70% 阈值。
- **阶段 1（工程化压缩）**：截断非子代理 tool 结果到约 100 token，仅改内存数据。
- **阶段 2（LLM 压缩）**：工程化压缩后若估算 token 仍超 50% 阈值，才调用 LLM 压缩。
- **三段保留**：保留最旧 5 个 unit + 中间段 LLM 摘要 + 最新 5 个 unit，通过 `HistoryUnit` 原子单元保证 `ToolRound` 不被拆分。
- LLM 压缩失败时降级为仅工程化压缩，不中断 agent loop。

#### 迁移 parking_lot 锁并优化阻塞 IO 与内存管理
- 将 `std::sync` 锁替换为 `parking_lot` 实现，减少锁竞争开销。
- 优化阻塞 IO 路径，避免热路径无谓阻塞。
- 内存管理改进：减少不必要的克隆与分配。

### 修复

#### 子智能体任务状态卡死
- 修复已完成子智能体任务卡在"子智能体正在执行..."状态，前端无法正确展示结果。

#### 飞书 channel 消息丢失
- 修正飞书 reaction 语义，与飞书 API 规范对齐。
- 增容 message bus 队列，避免高频消息场景下队列满导致最后一条消息丢失。

#### 防御性错误处理
- 替换 `unreachable!()` 宏调用为防御性错误返回，避免运行时 panic。
- agent/gateway 关键路径改用 `Result` 传播错误，提升系统鲁棒性。

---

## [0.3.1] - 2026-08-05

较 [0.3.0] 的 19 个 commit 迭代，聚焦 **历史压缩可追溯性**、**token 统计准确性**、**前端渲染稳定性**、**工具执行可靠性** 与 **网关吞吐优化** 五大方向。

### 新增功能

#### 历史压缩保留原消息（双视图分离）
- 压缩流程从物理删除原消息改为标记位 `is_compacted` 分离两个视图：
  - **LLM 视角**（`load_messages_for_topic`）：只看 `is_compacted=0` 的压缩摘要 + 新消息，context 仍精简。
  - **UI 视角**（`load_messages_for_topic_full`）：看原消息（含 `is_compacted=1`）+ 新消息，排除压缩摘要，前端切回老话题仍能展示完整原始对话。
- 新增 `compact_topic_history`：不删除原消息，仅打标记 + 插入摘要，同事务内删除旧摘要避免累积。修复 token 统计因压缩丢失 `usage` 的问题。
- `messages` 表新增 `is_compacted INTEGER NOT NULL DEFAULT 0` 列，migration 幂等。

#### Topic 维度 token 统计
- 新增 `batch_topic_token_stats`，按 `topic_id` 聚合 token 消耗，替代原按 `session_id` 聚合导致的同 session 多 topic 共享总和问题。
- 前端侧边栏每个 topic 显示独立 token 消耗与 context 占用百分比（Coins 图标 + 数值，绿/黄/红三色指示）。
- 主代理执行结束时触发 `list_topics` 刷新（500ms 防抖），实时更新侧边栏 token 统计；子代理每轮执行也支持刷新。

#### 设置页重启按钮
- 设置页 Footer 区新增重启按钮，样式为 `bg-tertiary` + 边框，与主保存按钮区分。
- 确认对话框区分触发来源：保存后触发显示"配置已保存 / 稍后"，手动触发显示"重启服务 / 取消"并警告未保存改动。
- 状态管理改用 `restartDialogMode: 'saved' | 'manual' | null`，按钮在重启期间显示 loading 并禁用。

#### 设置页懒加载标签页与子代理管理
- 拆分设置页为懒加载标签页，减少首屏渲染负担。
- 前端支持子代理创建与删除，配合 `PUT /api/subagents/update` 端点。

#### LLM 主调用可配置重试机制（0.3.0 收尾补充）
- `ProviderConfig` 增加 `max_retries` 字段（serde default=3，向后兼容）。
- `agent_loop` 流式 + summary 两个调用点实现重试循环：指数退避 1s/2s/4s，仅对 429/502/503/504/timeout/connection reset 重试；流式仅在未 emit delta 时重试，避免重复输出。

### 修复

#### 前端渲染稳定性
- `MessageBubble` 使用 `React.memo` 避免流式期间不必要重渲染。
- `useWebSocket` 回调 ref-化，避免父组件重渲染触发 WebSocket 无谓重连。
- 修复触发滚动到底部按钮时新消息计数错误。
- 修复话题重命名预填字段与写入字段不一致。
- 修复流式期间消息重渲染、WebSocket 无谓重连与新消息计数错误。

#### 子智能体结果展示
- 失败/超时子智能体返回结构化结果，前端可点击查看详情，而非静默丢失。

#### Token 统计准确性
- 修复 token 统计按 `session_id` 聚合导致同 session 多 topic 共享总和：改为按 `topic_id` 聚合，子代理消息通过 `session_id NOT LIKE 'sub:%'` 排除。
- 修复主代理执行结束后 token 统计不刷新：`useMessages` 在 `execution_completed` 事件时触发 `bumpTopicRefreshTrigger()`。

#### 工具执行可靠性
- 修复 shell 工具超时未生效：`adb start-server` 守护进程继承 stdout 管道导致 EOF 阻塞，`adb devices` 误判 socket 等待为 stdin 等待绕过 deadline。新增 `STREAM_DRAIN_MS` 常量、改进 `kill_and_reap`、移除 `should_return_pending` 中的错误检查，确保 timeout 参数完全覆盖默认值。

#### 安全加固
- `web_fetch` 加固 SSRF 防护，禁用 HTTP 重定向，与 `http_request` 实现对齐。

#### MCP 兼容性
- 限制 MCP server 名称字符并兜底 `tool_name` 清洗，避免非法字符导致 OpenAI API 400。

### 性能优化

#### 网关吞吐
- `send_with_retry` 对 `ChannelFull` 错误短路（不重试、不退避），加速队列消费，避免 dispatcher 在满队列时 7s 退避阻塞。
- 新增 `ChannelError::ChannelFull` 变体，`CliChannel` 在 `try_send` 返回 `Full` 时映射为 `ChannelFull`。

#### 存储查询
- `get_topic_message_count` 改用 `SELECT COUNT(*)` 在数据库侧计数，避免将所有消息（含 `content`、`tool_calls_json` 等大字段）加载到内存。

#### 热路径优化
- 减少热路径无谓拷贝与重复正则编译，跳过已完成 migration。

### 内部改进
- 删除临时计划文件 `PLAN.md`。
- CHANGELOG 补充 LLM 重试机制条目并修正 commit 计数。

---

## [0.3.0] - 2026-08-04

较 [0.2.0] 的 18 个 commit 迭代，聚焦 **Agent 执行与显示层解耦**、**LLM 调用稳定性**、**工程化基线**、**并发持久化稳定性**、**安全加固** 与 **MCP 兼容性** 六大方向。锁屏冻结架构修复经五轮对抗性审查验证。

### 新增功能

#### 话题重命名
- 新增 `RenameTopic` 命令与 `TopicRenamed` 协议消息，复用存储层已有的 `update_topic_title` 方法。后端响应携带刷新后的完整 topic 列表，前端零额外往返同步侧边栏。
- 前端 `TopicList` 侧边栏增加内联编辑入口：悬停显示铅笔图标，Enter 提交 / Esc 取消 / blur 取消，通过 `onMouseDown preventDefault` 防止按钮点击时 input 提前失焦。

#### 前端自动构建集成
- 新增 `build.rs`，`cargo build` 时自动执行 `npm install + npm run build`，消除前后端构建割裂。支持 `SKIP_FRONTEND_BUILD` 环境变量跳过。

#### 工程化基线
- `rustfmt.toml` 固化 `max_width=100` / 4 空格缩进；`Cargo.toml` 配置 `[lints.rust]` 与 `[lints.clippy]` 渐进式规则。
- `.github/workflows/ci.yml`：Rust（fmt + clippy + test）+ 前端（eslint + tsc + test + prettier format:check）双平台 CI。
- `Makefile` 新增 `check` / `fmt` / `fix` 目标，clippy 对齐 `--all-targets --all-features`。
- 前端 eslint flat config + prettier 配置，对 47 个前端文件统一格式化并在 CI 强制 `format:check`。

#### 默认迭代上限调整
- `max_tool_iterations` 默认值调整为 1000，匹配长任务子代理的实际需求。

#### LLM 主调用可配置重试机制
- `ProviderConfig` 增加 `max_retries` 字段（serde default=3，向后兼容），透传至 `AgentRuntimeConfig` 归属 agent 行为层，不进 `ProviderRuntimeConfig` 以保持 provider 构造包纯净。
- `agent_loop` 流式 + summary 两个调用点实现重试循环：指数退避 1s/2s/4s，仅对 429/502/503/504/timeout/connection reset 重试；流式仅在未 emit delta 时重试（`AtomicBool` 跟踪），避免重复输出；退避 sleep 期间响应 `cancel_signal`，取消优先。
- 前端 `ProviderConfig` 类型和表单增加 `max_retries` 字段。
- 7 个单元测试（3 判定 + 4 行为），540 个 lib 测试全绿。

### 架构修复

#### Agent 执行与显示层解耦（锁屏冻结根因修复）
根因：浏览器锁屏导致 WebSocket 半死，`ws_sender.send().await` 永久阻塞，级联阻塞 dispatcher → MessageBus → Agent Loop，后端停止执行直到解锁。

基于第一性原理建立"执行-显示解耦"原则：agent 执行只依赖 SQLite 持久化，实时广播是可丢弃的最佳努力通道。

- `MessageBus::publish_outbound` 由 `send().await` 改为 `try_send()`：bus 满时丢弃消息并告警，agent 不再被显示层阻塞。新增 `BusError::Dropped` 变体。
- WebSocket writer task 包裹 `tokio::time::timeout(30s)`：半死连接超时即关闭。使用每连接独立的 `CancellationToken`（非共享的 CliChannel 级 token），避免一个连接超时关闭所有连接。writer 退出时 cancel 通知主 loop 退出，确保 `unregister_connection` 执行。
- `CliChannel::send` 由 `send().await` 改为 `try_send()`：dispatcher 单线程顺序处理，原阻塞式发送在 writer 卡住时会阻塞所有连接 37s，改后立即返回。
- 全仓 13 处 `publish_outbound` 调用统一区分 `Dropped`（warn，预期背压）/ `Closed`（error，异常）日志级别，消除监控噪音。scheduler 的 3 处 `?` 改为 warn，避免 `Dropped` 触发 misfire 重试风暴。
- 前端 WebSocket 添加 25s 客户端 ping + 指数退避重连（3s→6s→12s→24s→60s 封顶，上限 999 次）。重连后区分"重连恢复"与"首次/切换通道"：前者保留断连前 messages 并刷新 topic 列表，后者清空数据避免污染。

### 安全加固

#### SSRF 重定向绕过修复
- `web_fetch` 工具禁用 HTTP 重定向（`redirect::Policy::none()`）：原 `validate_url` 只校验初始 URL 的 host，跟随 302 跳转可重定向到 `169.254.169.254`（云元数据）或 `127.0.0.1` 等内网地址，绕过 `is_private_host` 的 SSRF 防护。与 `http_request` 工具保持一致。

#### Safety Guard 正则收紧
- `format` 正则收紧为 `\bformat\s+.*[a-z]:`，要求出现盘符才拦截，避免误伤 `dart format`、`buf format`、`pytest --format` 等合法命令。
- 按平台分组注入规则，Unix 不再注入 Windows 专用规则；`Remove-Item` 正则改为小写，与 `guard_command` 的大小写处理一致。

### 稳定性修复

#### SQLite 并发写入死锁
- 7 个写事务从 `BEGIN DEFERRED` 改为 `BEGIN IMMEDIATE`：在事务开始即获取写锁，消除多 sub-agent 并发写入时的死锁路径。`busy_timeout` 从 5s 提升至 30s。
- 根因：`BEGIN DEFERRED` 下多个事务可同时读 `MAX(seq)` 不持写锁，提交时互相阻塞，5s timeout 耗尽后返回 `SQLITE_BUSY`。`BEGIN IMMEDIATE` 强制写者串行排队，顺带消除 `MAX(seq)+1` 竞态导致的 UNIQUE 约束冲突。

#### 测试与代码质量
- 修复 `anthropic` 错误链嵌套测试为真正的 `#[source]` 链（原测试是无效的，inner 变量被 `let _` 抑制）。
- 补充 `anthropic` provider 15 个纯函数单测（原 396 行零测试），覆盖 data URL 解析、图片过滤、字段过滤、响应反序列化、错误链格式化。
- 修复 3 个失败测试：`agent_md_template` 写入模板内容 / `StreamingAccumulator` BTreeMap 保序 / `source_order` 断言补全。
- 清理未使用的 dead code 函数与方法。
- 新增 `ARCHITECTURE.md` 架构文档，聚焦数据流与 7 个关键设计决策。

#### CI 覆盖范围扩大
- `cargo build --lib` 改为 `cargo build`，确保 `main.rs` 二进制入口被编译验证。
- `cargo test --lib` 改为 `cargo test`，纳入 `tests/` 目录集成测试。`test_request_format.rs` 的 8 个序列化测试此前从未在 CI 中运行。

#### 跨平台构建修复
- 修正依赖分类错误：`rmcp` / `schemars` / `http` / `tower-http` / `rust-embed` 均为跨平台 crate，错放在 `[target.'cfg(windows)'.dependencies]` 下导致 Linux 构建失败，移出 target 段。

#### MCP 工具名清洗
- OpenAI 要求 function name 匹配 `^[a-zA-Z0-9_-]+$`，否则整个请求 400。MCP 工具名由 `mcp_{server_key}_{tool_name}` 拼成，两个输入源分别处理：
- 后端：`sanitize_tool_name` 替换 `tool_name` 中的非法字符（`.`, `:`, `/` 等）为 `_`，保留 `server_key` 和 `tool_name` 原值用于路由，仅清洗 LLM 可见的 `full_name`，发生清洗时打 warn 日志便于定位。
- 前端：MCP 卡片头部改用 `MapEntryHeader` 支持点击重命名，`addMcp` / `renameMcp` 正则校验 server 名称 + toast 提示。顺手修了 `MapEntryHeader` 进入编辑时 `val` 未同步当前 `name` 的 bug。

## [0.2.0] - 2026-07-31

较 [0.1.2] 的 47 个 commit 迭代，聚焦 **能力策略**、**模型独立配置**、**话题级并发隔离** 与 **Agent Loop 性能优化** 四大方向。

### 新增功能

#### 能力策略（CapabilityPolicy）统一模型
- 新增 `CapabilityPolicy` 领域模型，统一管理专家/子代理/技能的 `allowed_skills` / `denied_skills` / `allowed_tools` / `denied_tools` 四类白/黑名单。
- 专家和子代理的 Markdown frontmatter 支持上述四类字段，在 `create_agent` 时按策略过滤 `ToolRegistry`（快照语义）。
- 子代理支持数据驱动的工具过滤，删除旧版内置 `explore` 白名单。
- 新增 HTTP 端点 `GET /api/tools` 与 `PUT /api/subagents/update`，供前端动态加载工具清单与更新子代理配置。
- 前端引入通用 `CheckboxList` 勾选组件，将 capability 字段从自由文本 textarea 改为按来源分组的勾选式编辑，避免手输工具名。

#### 模型独立配置
- 专家和子代理的 Markdown frontmatter 新增 `provider` 与 `model` 可选字段，引用 `config.json` 中的 `providers` / `models` 表，可独立指定模型而不再继承主 agent。
- 主 agent 支持会话级模型覆盖（`provider` / `model` 在配置层覆盖）。
- 前端编辑模态框新增"模型配置"卡片，含 provider/model 下拉选择，选项由 `GET /api/model-options` 提供。
- 专家引用不存在的 provider/model 时阻断会话并报错；子代理引用失败时将错误回传给 LLM。

#### 话题级并发隔离
- 实现聊天消息串行锁，确保同一聊天的消息处理串行执行。
- 串行锁按 `topic_id` 键化，支持多话题并发执行，互不阻塞。
- `topic_id` 全程显式传递（从消息接收到历史加载），修复消息错投与并发阻塞。
- 内存历史缓存按 `topic_id` 键化（原按 `chat_id`），修复 DB 压缩时的 TOCTOU 覆盖问题。

#### 子代理嵌套深度配置
- 暴露 `tools.task.max_nesting_depth` 为可配置项（默认 2），前端"Task 子代理"卡片新增输入框。
- 保留双重防护：工具调用前校验 + 工具集构造时按深度移除 `task` 工具。

#### 专家配置热更新
- 专家配置保存后即时生效，无需重启网关。

#### 工具调用序列前向检查
- 添加工具调用序列的前向校验，确保 tool 消息紧随 assistant 的 tool_calls 消息，避免 OpenAI/DeepSeek API 400 错误。

#### 前端测试基础设施
- 引入 vitest 测试基础设施，添加 `useChat handleServerMessage` 特征测试。

### 性能优化

#### Agent Loop 性能（P0）
- **工具定义缓存**：`get_definitions()` 从每轮迭代调用一次改为 `process()` 循环外构建一次。基于快照语义——单次 `process()` 内 `Arc<ToolRegistry>` 不变，专家切换只影响下一次 `create_agent`。
- **轻量 token 估算**：新增 `estimate_text_tokens_from_chat_messages`，直接基于 `ChatMessage` 累加字段长度，消除中间 `text_only_messages: Vec<Message>` 构造（原方案每条消息 × 5 字段双克隆）。
- **工具 token 估算循环外预算**：`serde_json::to_string` 全量序列化工具定义从每轮一次降为 `process()` 内一次。
- **DB 写 offload**：`PersistingEmittedMessageHandler` 用 `tokio::task::spawn_blocking` 包装 SQLite 同步写，解除 tokio worker 线程阻塞，不改变失败语义（仅记日志不阻断主流程）。

#### SessionPool 锁范围收敛
- `ensure_session_internal` 改为 double-checked locking：先短暂持锁检查存在性，释放锁后执行耗时的 session 创建（含配置加载、agent 工厂构造），再次持锁插入并处理竞态。避免跨 `session_factory.create().await` 持有全局锁导致所有 channel 的 session 访问串行化。

### 修复

#### 安全修复
- 修复 SSRF 重定向绕过漏洞。
- 修复符号链接路径遍历漏洞。
- 修复 `TodoItemSummary` 字段缺失。

#### 并发与稳定性
- `replace_todos` 用 `transaction()` 包裹 DELETE + INSERT，保证原子性——中途失败自动回滚，避免 todos 列表丢失。事务内复用同一连接查询返回值，消除 `drop(conn)` 后重新 `pool.get()` 的冗余。
- 修复话题隔离下 `topic_id` 全程显式传递，解决消息错投与并发阻塞。
- 修复内存历史按 `topic_id` 键化，新增 `replace_topic_history` 修复 DB 压缩覆盖。
- 修复 `http.rs` 重启信号吞错（P1）。
- 修复 prompt 注入吞错（P0）。

#### 前端修复
- 修复点击设置后白屏：React hooks 顺序违规（`useEffect` 放在条件 return 之后导致 #310 错误）。
- 修复 `useEffect` 依赖项缺失（P0）。
- 修复子智能体视图间歇性丢消息：同步前置 `subAgentViewRef` / `subAgentStackRef`。
- 修复子智能体工具消息去重：改为按 `id + type` 去重，修复工具状态卡在执行中。
- 修复高亮消息时退出子智能体视图的问题。
- 修复专家发现与前端选择多项问题。
- 兼容 `base_url` 末尾斜杠，避免拼接产生双斜杠导致 404。
- `TodoWriteTool` merge 模式内存为空时从 DB 回填，防止丢失旧项。

#### 依赖与构建
- 升级 wechatbot 的 `reqwest` 至 0.13，消除版本冲突。
- 将 `rmcp` 依赖从 git branch 迁移到 crates.io 版本。
- 提交 `Cargo.lock` 以保证二进制构建可复现（binary 项目约定）。

### 重构

#### 前端架构
- 重写 `useChat` 为组合根，消除上帝 Hook。
- 抽取 `useChat` 的领域子 hook 与 `messageMappers`。
- 建立前端 API 客户端层，消除硬编码路径与重复 `fetch`。
- 拆分 `ConfigPage.tsx` 与 `storage/mod.rs`（P2）。
- 清理 P0/P1 技术债（`any` 类型、React key、dead_code、硬编码 URL）。

#### 后端架构
- 重构 `AgentLoop` 中的消息处理逻辑，简化工具结果处理和 LLM 请求构建。
- 重构工具提示提供者，整合工具使用说明；删除冗余的 `TodoPromptProvider`。
- `get_current` / `save_topic` 直读 DB 加载消息，移除 `SessionManager` 依赖。
- 改用 `gray_matter` 解析 Markdown frontmatter，增加相应日志。
- 优化工具使用说明，简化记忆检索和写入规则。
- 移除未使用的 `cli_sessions` 变量，优化 `ws.rs` 中的代码。

### 内部改进
- 增加整理意识，确保同类工作输出到同一文件夹。
- 修复 MCP 日志输出。

---

## [0.1.2] - 2026-07-28

### 新增
- WebSocket 连接泄漏修复，使用 `CancellationToken` 实现优雅重启。
- 交互式 Shell 会话管理。
- 数据库连接池优化会话存储，新增错误处理。
- 平台特定的进程输入等待检查，增强 Bash 工具的用户授权检测。
- 前端静态文件嵌入二进制。
- React Web UI 前端界面。

[0.3.1]: https://github.com/picobot/picobot/compare/v0.3.0...v0.3.1
[0.3.0]: https://github.com/picobot/picobot/compare/v0.2.0...v0.3.0
[0.2.0]: https://github.com/picobot/picobot/compare/v0.1.2...v0.2.0
[0.1.2]: https://github.com/picobot/picobot/releases/tag/v0.1.2