Automated Browser Test Report

AI 聊天「思考过程 + 分步结论」
自动化测试报告

对标 DeepSeek / ChatGPT / Manus 的执行过程展示功能,经内置浏览器自动化逐流程实测:思考流式、工具/路由/专家步骤与结论、HITL 暂停-恢复、中止、重新生成、历史精确回放与存量降级。本报告汇总实测数据、图表与截图证据。

日期 2026-11-19 环境 dev · :3100 → :8980 模型 deepseek-v4.1-flash 依据 docs/design/chat-process-timeline-plan.md
20/20
用例通过
80
落库步骤
9
覆盖消息轮
5
缺陷发现并修复
1.8s
平均思考耗时
0
控制台报错
01

数据图表

步骤终态分布

ai_message_step 全量 80 步按终态统计
成功 70失败 4已拒绝 4已允许 280步骤总数
成功70失败4已拒绝4已允许2

各轮步骤数

9 个助手消息轮的过程步骤数(橙色 = 中止轮)
05101419知识库检索 14 步141专家文件清单 7 步72写文件·允许 4 步43报告·多次暂停 11 步114流水·拒绝 4 步45全量·中止 13 步136车辆登记检索 6 步67逐文件读取 19 步198写报告·断连 2 步29
正常完成7中止2

步骤类型分布

按 kind 统计步骤数量
工具调用39 步
深度思考32 步
人工确认5 步
专家咨询2 步
路由决策2 步

各类型平均耗时

专家咨询含同步等待,耗时显著高于工具
工具调用146 ms
深度思考1.8 s
人工确认0 ms
专家咨询22.5 s
路由决策0 ms
02

测试用例矩阵

编号用例阶段结果证据说明
T01模型思考流式渲染P1通过S6ThinkingBlock 事件桥接,推理文本逐片流入思考步,多轮 ReAct 各成一步
T02工具步 + 一行结论P1通过S2工具步带状态/耗时/首行结论,入参出参可展开
T03路由步 + 判定理由P1通过S3路由步结论含决策理由,详情展示动作/置信度/任务片段
T04专家输出镜像 + 原文 + 子工具P1通过S5专家回答实时镜像;完成后原文留证 + 子工具仅名称/状态/耗时
T05完成后折叠摘要P1通过S1自动折叠为「已深度思考 X · 已完成 N 步 · 用时 Y」
T06展开步骤详情P1通过S2思考全文 markdown + 光标 + 耗时脚注 + 复制
T07刷新 / 切会话精确回放P2通过S1steps REST 还原顺序/结论/详情,与流式一致
T08HITL 暂停等待态P1通过S7等待摘要 + 进行中工具步 + 等待确认步 + 原位确认卡
T09HITL 允许 → 续接 upsertP2通过S7confirm 步 waiting→approved,同键 upsert 无重复行
T10HITL 拒绝 → 专家适配P2通过S4confirm→rejected 带原因,专家收 DENIED 后切换工具
T11多次暂停 upsert 无重复P2通过S411 步 / 11 键,跨两段暂停-恢复 seq 保留
T12流中停止 → abortedP1通过S1message status=3,步骤保留,摘要「已中止」
T13重新生成替换旧回答P1通过S1旧回答替换无重复,步骤备份/恢复路径正常
T14存量旧会话不回填P2通过S8旧会话 0 面板 + legacy 工具卡,无 backfill
T15零步骤自答降级P1通过S1纯自答无步骤 → 不渲染面板,与现状一致
T16模型思考模式配置P3通过S9思考模式 select 渲染;保存→DB true→还原 null
T17控制台零报错QA通过—修复 prop 告警后 console error=0
T18改动文件类型检查零错误QA通过—vue-tsc 改动文件 0 错误(其余为存量无关错误)
T19后端编译 + 健康检查QA通过—mvn BUILD SUCCESS;/sys/health 200
T20窄屏适配P3通过—900px 媒体查询就位(代码审查验证)
03

截图证据

折叠摘要
S1折叠摘要 + 中止态完成后自动折叠为「已深度思考 X · 已完成 N 步 · 用时 Y」;中止轮显示「已中止」
展开思考
S2展开思考步详情推理全文 markdown 流式渲染 + 「思考了 1 秒」脚注 + 复制详情
路由详情
S3路由步判定详情动作 / 置信度 0.8 / 判定理由 / 任务片段
专家原文+子工具
S5专家原文 + 子工具原文留证可展开;子工具仅名称/状态/耗时(零入参出参泄漏)
实时流式
S6实时流式执行思考步 + 工具步累积,phase 播报「数剑正在调用…」+ 停止按钮
HITL等待
S7HITL 暂停等待态「等待你确认」摘要 + 进行中工具步 + 等待确认步 + 原位确认卡
legacy会话
S8存量旧会话降级旧会话无步骤行 → 0 面板 + legacy 工具卡(不回填)
模型思考配置
S9模型思考模式配置「思考模式」select + 说明文案;保存链路 DB 验证 true→null
04

缺陷发现与修复

B1耗时显示天文数字已修复

后端 Jackson 将 Long 序列化为字符串,前端 += 变字符串拼接,摘要出现「10403409143223.1 s」

✓ processTypes 增加 toNum 归一,formatDuration/ThinkingDetail 同步处理

B2展开态在 id 归位后丢失已修复

done/tool_confirm 将占位 id 换为真实 messageId,展开键失配导致面板意外折叠

✓ 新增 rekeyProcess,在 id 替换时迁移展开键

B3暂停期摘要误显示「已完成」已修复

HITL 暂停时 streaming=false,摘要走完成分支

✓ 摘要等待态感知:「等待你确认 · 共 N 步」+ 时钟图标

B4专家思考步标题专家名重复已修复

标题已含「专家「X」思考」,又追加 speaker 后缀

✓ 移除冗余 speaker 后缀

B5ProcessPanel prop 类型告警已修复

durationMs 声明 Number 但收到 Long→String 字符串

✓ prop 放宽为 number|string

05

数据链路

模型 APIreasoning_content AgentScope 2.0.5ThinkingBlock* 事件 AiStreamEventBridge+ thinking/tool 钩子 AiProcessTimeline步骤 + 结论 SSEstep_* ai_message_stepupsert 落库 GET /steps历史精确回放 ProcessPanel折叠面板 + 时间线 收尾/暂停 实时 step_start / delta / end