http://localhost:3100(Vite 7.2.7 dev)、后端 http://127.0.0.1:8980/js/a(ai-server-1.0.jar)系统管理员(admin) / Ces(caseId 2121846987260764162)deepseek-v4.1-flash:1017git status 为空);仅创建测试会话/产物,并在 HITL 测试中临时撤销后再恢复 execute 信任本轮按要求先重启前后端:后端新进程 PID 9732(Started in 8.367 s),前端新进程 PID 7232(ready in 3.707 s),端口 8980 / 3100 正常监听。
| 维度 | 结论 |
|---|---|
| 前后端重启 | 通过。后端 8.4 s 启动、前端 3.7 s 就绪;登录态保留,打开案件、进入/退出工作台均正常 |
| 工作台入口与会话恢复 | 通过。主窗口 →「打开智能工作台」→ /workbench/chat;返回自主模式后再进入,自动恢复上次会话、产物面板与产物列表 |
| 菜单与页面完整性 | 通过(20/20 菜单页全部打开)。侧栏 5 组共 20 个菜单页全部可导航并正确渲染 |
| 任务工作台主链路 | 通过。新建任务、发送、流式生成、停止、复制、重新生成(含禁用原因)、删除确认、重命名校验、结束任务确认均符合预期 |
| HITL 变更前确认 | 通过(撤销信任后验证)。出现确认卡片(允许本次/记住该工具/拒绝);「记住该工具」后命令执行、信任恢复 |
| 产物闭环 | 通过。write_file → 磁盘文件 → /artifacts 接口 → 右侧产物面板 → 预览(渲染/源码)/下载 全链路打通 |
| 知识库问答 / 来源 | 通过。检索测试命中 5 条并显示得分;指定专家问答引用知识库,5 条参考来源可展开、可查看文档全文 |
| 管理页业务逻辑 | 通过。列表检索/分页/详情/表单校验/连通性测试/健康自检/工具调用与编排审计均可操作,结果与接口一致 |
| UI 与响应式 | 存在问题。窄窗口三栏挤压、窗口缩放后布局不重算、未挂载路由导致主区空白等(见缺陷 D1–D3) |
| 后端/前端日志 | 后端无 ERROR;前端 Vite 无报错。仅见 1 条启动初期的「未登录访问」与 MCP 通知类 WARN,均不影响业务 |
总体判定:核心业务主链路可用,未发现 P1 级完全阻断缺陷;发现 5 个 P2、8 个 P3 问题。建议优先修复 D1–D5。
| 分组 | 页面 | 主要验证点 | 结果 |
|---|---|---|---|
| 智能体 | 任务工作台 /workbench/chat |
新建任务、会话列表、发送/流式/停止、消息操作、资源选择、产物面板 | PASS(含 3 个缺陷) |
| 智能体 | 数剑配置 /workbench/agent/entry |
表单回显、保存 | PASS(保存提示「保存成功」) |
| 智能体 | 专家配置 /workbench/agent/expert |
列表、搜索无结果、新增校验、查看、复制 | PASS |
| 智能体 | 任务管理 /workbench/agent/session |
搜索、分页、消息明细、工具调用展开、导出下载 | PASS |
| 智能体 | 长期记忆 /workbench/agent/memory |
三个 Tab、记忆配置、记忆内容、运行健康 | PASS(发现 D6) |
| 智能体 | 技能仓库 /workbench/agent/skill |
列表、SKILL.md 预览、新增校验 | PASS |
| 智能体 | 场景包 /workbench/agent/pack |
列表、详情、新增校验 | PASS |
| 模型与推理 | 模型配置 /workbench/model/config |
列表、连通性测试(978 ms 通过)、新增校验 | PASS |
| 模型与推理 | 上下文与压缩策略 /workbench/model/compaction |
配置回显、开关联动、刷新 | PASS |
| 知识库 | 知识库管理 /workbench/kb/base |
列表、详情、新增校验、文档跳转 | PASS |
| 知识库 | 文档与切片 /workbench/kb/doc?kbId=... |
KB 预选、切片弹窗(179 条/36 页)、自动入库开关 | PASS |
| 知识库 | 检索测试 /workbench/kb/retrieval |
Ctrl+Enter 检索、TopK/阈值、命中得分 | PASS |
| 工具与集成 | 业务工具注册 /workbench/integration/registry |
关键词搜索(11 条)、标签管理、详情 Schema | PASS |
| 工具与集成 | MCP 服务端 /workbench/integration/mcp-server |
口令掩码/随机生成、暴露清单、调用示例 | PASS(发现 D9) |
| 工具与集成 | MCP 客户端 /workbench/integration/mcp-client |
连接测试(成功,发现 0 工具) | PASS |
| 审计与观测 | 会话与消息审计 /workbench/audit/message |
关键词搜索、消息详情 | PASS |
| 审计与观测 | 工具调用明细 /workbench/audit/tool-call |
工具名筛选、入参/出参详情、失败率统计 | PASS |
| 审计与观测 | 链路追踪 /workbench/audit/trace |
状态筛选、详情(模型快照/上下文清单/时间线) | PASS(发现 D5) |
| 审计与观测 | 编排运行 /workbench/audit/route-run |
统计卡、筛选、详情(路由决策/任务片段/专家调用) | PASS |
| 审计与观测 | 健康自检 /workbench/audit/health |
9 通过/4 告警/1 待探测、单项测试转通过 | PASS |
| 路由 | 情况 | 结果 |
|---|---|---|
/workbench/model/usage(用量与配额) |
路由与页面均已实现,但不在侧栏菜单;直接访问触发 D1 空白页 | FAIL(D1) |
/workbench/not-a-real-page |
期望显示 404,实际同样被重定向到 /workbench/chat 并空白 |
FAIL(D1) |
java -jar ai-server/target/ai-server-1.0.jar → Started App in 8.367 seconds,Tomcat 8980//js/a。pnpm dev → Vite ready 3.707 s,http://localhost:3100。ae675a47-…),案件列表显示 8 个案件。/data/index(数据工作区),顶栏出现「打开智能工作台(独立窗口,当前页面保留)」。/workbench/chat,自动选中上次会话(19:20 的产物会话),右侧产物面板展开。/data/index;再次「打开智能工作台」→ 会话、消息、产物面板(1 个产物)均恢复。Shift+Enter:DOM value = "第一行测试\n第二行测试",换行语义正确。aria-label="停止生成"(danger 样式),textarea disabled=true 且已清空。textarea disabled=false。status=3、durationMs=8410、content="",会话未卡死。前置:平台已有「记住该工具」用户级信任(
execute/write_file),因此默认不会弹确认卡。为验证真实 HITL,先通过接口撤销execute信任,测试后再由 UI「记住该工具」恢复。
DELETE /ai/agent/1761400000000020302/trusted-tools?userId=1&toolCode=execute → 200,信任列表仅剩 write_file。{"command":"echo hitl-confirm-test"}hitl-confirm-test(退出码 0)。/trusted-tools:execute 信任恢复(createTime 20:41:17)。execute 入参 echo hitl-confirm-test,state=SUCCESS,耗时 26 ms。结论:HITL 拦截、允许、记住、执行、恢复信任全链路 PASS。
2123394239460651010),指定「涉毒案件分析研判专家」,发送:
「请用 write_file 工具在当前会话工作区 outputs/ 下创建文件 ui-e2e-artifact.md…」action=pinned,专家调用成功(4.6 s,rawOutput 含路径)。write_file SUCCESS,{"path":"outputs/ui-e2e-artifact.md","content":"# UI E2E artifact\nok\n"},67 ms。qingjian/data/cases/2121846987260764162/ai/workbench/2123394239460651010/outputs/ui-e2e-artifact.md,21 B。/artifacts 返回 total=1,kind=markdown, previewable=true, downloadable=true。ui-e2e-artifact.md 21B 11-19 20:33;预览弹窗渲染出标题 UI E2E artifact 与 ok;「源码」显示原文;「下载」触发下载事件。2123396262910341121),指定「涉毒案件分析研判专家」,问「《公安机关办理刑事案件程序规定》自哪一天起施行」。| 操作 | 实测结果 |
|---|---|
| 专家搜索「不存在的专家」 | 共 0 位,展示「暂无专家」 |
| 新增专家空提交 | 3 条校验:专家名称不能为空 / 专家编码不能为空 / 请选择绑定模型 |
| 新增技能空提交 | 技能标识不能为空 / 用途说明不能为空 |
| 新增场景包空提交 | 场景包编码/名称不能为空 |
| 新增模型空提交 | 配置名称不能为空 / 模型标识不能为空 |
| 模型连通性测试 | 「连通性测试通过(978ms)」 |
| 新增知识库空提交 | 名称/编码/向量模型三条校验 |
| 文档切片 | 公安办案程序.md 179 条切片,5 条/页,共 36 页 |
| 检索测试 | 「取保候审的条件是什么?」→ 命中 5 条,最高分 0.7555,Ctrl+Enter 生效 |
| 业务工具搜索「通话」 | 共 11 条;工具详情展示 JSON Schema |
| 标签管理空提交 | 标签名称不能为空 |
| MCP 客户端测试 | 「连接成功,发现 0 个工具:(无工具)」(因出口未挂载工具,符合当前配置) |
| 健康自检单项测试 | 外部 MCP 连接由「待探测」变为「通过:连通,发现 0 个工具」 |
| 任务导出 | 触发下载事件(浏览器下载) |
| 数剑配置保存 | 「保存成功」 |
严重级别:P1 阻断 / P2 高 / P3 中低。本轮无 P1;以下按影响排序。
http://localhost:3100/workbench/model/usage(该页路由与页面已实现,但侧栏菜单没有入口)。/workbench/chat,但主区域只剩空白(顶栏、侧栏正常,会话列表/聊天/输入区全部不渲染)。/workbench/not-a-real-page 现象相同,预期的 404 页(workbench/views/notFound)从未显示。screenshots/12-unmounted-route-blank-main.png;路由定义见 src/core/router/routes/index.ts:218(model/usage)与 :297(WorkbenchNotFound)。WorkbenchNotFound 或明确提示,而不是 replace('/workbench/chat') 后留下未挂载状态。perm_menu 的 workbench 子树;否则从静态路由移除。chat-workbench 高度 680、底边 720)。chat-workbench 仍为 680 高、底边 720;composer-send-btn 底边 686 > 视口 640,发送按钮与底部工具栏完全不可见。screenshots/16-resize-640-composer-hidden.png;实测数据 innerHeight=640, workbench.bottom=720, send.bottom=686。100dvh/calc() 或监听 resize/ResizeObserver 动态计算,避免挂载时一次性读取高度;聊天主区用 flex 自适应,composer 固定占位。outputs/ 下创建文 件 ui-e2e- artifact.m d…)。Enter 发送… 提示被裁切。screenshots/13-responsive-1024-artifact-open.png、14-responsive-1024-artifact-closed.png、15-sidebar-collapsed-composer-clipped.png。2123394239460651010 指定专家写文件后,助手消息正文为:
文件已写入(内容为 # UI E2E artifact 与 —— 以一个未闭合的反引号结束,句子不完整。content 同上,status=0(正常)、toolCallCount=2。rawOutput 也为 outputs/ui-e2e-artifact.md\n\n文件已写入(内容为# UI E2E artifact与"`,说明截断发生在专家输出落库之前/之时,而非前端渲染丢失。evidence/artifact-session-messages.json、evidence/artifact-session-toolcalls.json;同会话 UI 截图 screenshots/18-artifact-preview-modal.png 背景可见该消息。finish_reason(length/stop/其他)与编排器合并逻辑,避免把半截文本当作成功结果。route_decision 后应完全静默,防止其补写内容与专家输出拼接/竞争。0 ms / 0 工具 / 0 Token:
echo hello 会话)screenshots/19-trace-stale-running.png;接口筛选 status=running 返回 3 条。ai_trace 增加超时回收(与消息/编排 run 的 reaper 对齐);应用启动时把遗留 running 行置为 aborted 并写入原因;UI 对超过阈值仍未心跳的记录显示「疑似失联」。color: rgb(255,255,255)、border: 1px solid rgb(255,255,255),在白底上完全不可见。screenshots/06-memory-delete-button-invisible-clip.png;DOM 类名 ant-btn-background-ghost ant-btn-dangerous。aria-label。running;「终止」仅在实际运行轮次可用,或改名为「结束会话」。type=password 且提供「随机生成」;但下方 curl 示例与 MCP 客户端配置片段直接拼接当前口令(如 Authorization: Bearer BizBuddy)。<你的访问口令> 占位,或提供「复制含口令示例」显式按钮并二次确认。| 编号 | 问题 | 证据/复现 | 建议 |
|---|---|---|---|
| D9-1 | 文档表格点击「切片数」按钮会同时勾选该行,易造成误批量操作 | 知识库文档页点击 179 后该行 checkbox 变勾选 |
行点击选择与行内按钮事件隔离(@click.stop) |
| D9-2 | 模板库行内操作按钮为纯图标,既无 title 也无 aria-label |
DOM:<button><span class="i-ant-design:edit-outlined">,title/aria 均为 null |
增加 aria-label/tooltip |
| D9-3 | 资源菜单浮层与 tooltip 重叠;单选专家选中后菜单不自动关闭 | 截图 08-chat-resource-menu.png、09-chat-expert-chip-selected.png |
打开浮层时禁用/延迟 tooltip;单选后关闭子菜单 |
| D9-4 | 任务详情抽屉中助手历史正文写着「请在下方确认卡片中处置」,但抽屉内没有确认卡 | 任务管理 → 消息明细(含待确认轮次) | 审计视图改为中性文案或提供「前往会话处理」链接 |
| D9-5 | 消息页脚「由 AI 生成」在窄列竖排;会话标题在列表/头部被截断,重命名预填的也是 40 字截断标题 | 1280×720 截图;重命名弹窗 | 页脚允许换行/隐藏次要信息;重命名回填完整标题(后端保存 fullTitle) |
| D9-6 | 侧栏滚动位置在切换页面后保留,可能把当前分组滚出视口 | 从 MCP 客户端页返回时侧栏停在「模型与推理」段 | 路由切换后将当前菜单项滚动到可见区域 |
| D9-7 | 「查看审计链路」仅按 sessionId 过滤列表,筛选区没有可见回显/清除入口 | 从聊天执行过程跳转后 URL=?sessionId=...,列表仅 2 条,但筛选条未显示该条件 |
增加可移除的筛选 chip 或自动打开对应链路详情 |
2123375792932618241(19:20)的 write_file 工具记录为 SUCCESS(Written to outputs/e2e-artifact-20261119.md),但磁盘无该文件,产物接口 total=0,面板显示「本会话暂无产物」。regenerate/check 返回 allowed=false, reasonCode=UNKNOWN_TOOL_USED,原因「该轮调用了未登记的工具(write_file),无法确认是否只读,不能重新生成」。write_file 是框架内置写工具、语义明确,建议纳入“已知写工具”分类并给出明确的「含写操作,不可重生成」提示,而非“未登记工具”,否则审计口径会误导。route_decision。这让简单任务多一次模型调用,并出现专家回答半截被当作最终答案的问题(见 D4)。建议只在「问题需要专家能力」时强制路由,或为“指定专家”增加“仅对话内优先”语义。/trusted-tools 接口)及撤销操作。status=0/1 与 running 是两套语义;聊天列表已能区分「生成中」角标与「已结束」,任务管理页未区分。建议统一展示口径。/mcp,出口未挂载工具时“连接成功但 0 工具”,健康自检也仅告警。这对首次配置是合理的,但建议在 MCP 客户端「测试」结果中提示“对端暴露清单为空,请先在 MCP 服务端勾选工具”。ai/workbench/{sessionId} 的保留/清理策略,并在重启、会话结束、案件关闭时保证不误删 outputs/。| 场景 | 原因 |
|---|---|
| 附件上传(图片/文档) | 内置浏览器不支持文件选择器(IAB file chooser 不可用),仅验证入口存在 |
| 计划模式完整「批准/拒绝」执行链 | 本轮验证了开关与提示语;批准会触发写操作,为控制数据影响未执行(历史数据中已存在计划拒绝记录) |
| 「完全访问」权限模式 | 未切换,避免与 HITL 测试混淆 |
| 专家的「AI 生成提示词」 | 会触发额外模型调用,未测 |
| 实际删除(任务/专家/文档/知识库/工具标签) | 仅验证确认弹窗并取消,避免破坏现有数据 |
| 多用户、部门/可见范围权限 | 单管理员账号,未做跨用户越权验证 |
| 断网/SSE 重连/后端重启中生成 | 上一轮报告已覆盖,本轮未重复 |
| Electron 独立窗口/原生下载管理器 | 本次在浏览器环境验证,未启动 Electron 壳;下载仅确认触发 |
| 移动端/触屏 | 未测 |
model/usage 菜单或移除路由。100dvh/ResizeObserver),保证 composer 始终可见。finish_reason 与未闭合 Markdown;截断消息标记「部分完成」并支持重试;入口智能体路由后静默。running(D7)。aria-label/tooltip、行内按钮事件隔离、浮层与 tooltip 互斥、菜单滚动回显(D9)。ai/workbench/{sessionId}/outputs|plans 的生命周期与备份策略,避免重启/清理后历史产物不可追溯(D10)。screenshots/)| 文件 | 内容 |
|---|---|
01-workbench-chat-home-1280.png |
工作台首页(1280×720,三栏:侧栏/会话/聊天+产物) |
02-agent-entry-config.png |
数剑配置表单 |
03-agent-expert-list.png |
专家配置卡片列表 |
04-agent-expert-create-validation.png |
新增专家必填校验 |
05-memory-content-tab.png |
长期记忆 · 记忆内容 |
06-memory-delete-button-invisible-clip.png |
「删除记忆」白字白框(放大) |
07-chat-new-task-welcome.png |
新建任务欢迎页 |
08-chat-resource-menu.png |
资源/附件菜单与 tooltip 重叠 |
09-chat-expert-chip-selected.png |
指定专家后 chip 与子菜单勾选 |
10-mcp-client-list.png |
MCP 客户端列表与测试 tooltip |
11-session-item-hover.png |
会话项悬停「…」 |
12-unmounted-route-blank-main.png |
未挂载路由导致主区域空白 |
13-responsive-1024-artifact-open.png |
1024×768 + 产物面板打开(严重挤压) |
14-responsive-1024-artifact-closed.png |
1024×768 收起产物后(页脚竖排) |
15-sidebar-collapsed-composer-clipped.png |
侧栏收起后输入区被裁切 |
16-resize-640-composer-hidden.png |
缩放到 640 高后发送按钮完全不可见 |
17-kb-source-fulltext-drawer.png |
来源全文抽屉 |
18-artifact-preview-modal.png |
产物预览(渲染视图) |
19-trace-stale-running.png |
链路追踪「执行中」僵尸记录(3 条) |
evidence/)| 文件 | 内容 |
|---|---|
backend-console.log |
后端重启与全程日志(无 ERROR) |
frontend-console.log |
Vite dev 启动日志 |
artifact-session-messages.json |
产物会话消息(含 D4 截断正文) |
artifact-session-toolcalls.json |
write_file / route_decision 入参出参 |
artifact-session-artifacts.json |
产物列表(total=1) |
hitl-session-messages.json |
停止/HITL 会话消息(status=3 等) |
hitl-session-toolcalls.json |
execute 两次成功调用(含确认前/后) |
kb-session-messages.json |
知识库问答消息与来源 |
session-list.json |
最近会话列表(含 status/running/pinnedExpert) |
trusted-tools.json |
HITL 信任恢复后的「已记住工具」 |
2121846987260764162(Ces)2123394239460651010(artifacts=1,文件 outputs/ui-e2e-artifact.md)21233959163140300812123396262910341121(sources=5)2123375792932618241git status --porcelain 为空。ui-e2e-artifact.md),未删除既有数据。execute 的用户级信任,测试后已通过「记住该工具」恢复(trusted-tools.json 可复核)。