02 · 企业可控
ChatBI 管理后台
让管理员无需查阅文档即可判断智能体能否上线,并在上线后找到需要处理的问题
0726
项目背景
本项目是 ChatBI 的智能体管理后台。管理员(懂业务、会写查询,常由业务小组长或数据分析师担任)在这里搭建和维护智能体,业务人员通过自然语言向智能体查询业务数据。每个智能体对应一个问数场景,单独交付与维护。
项目快照
核心问题
管理员进入一个智能体后,只能在平铺的八项菜单之间自行判断它所处的阶段与下一步工作。如何让管理员不查阅文档即可判断智能体能否上线,并在上线后找到需要处理的问题?
改版后 · 概览

产品阶段
ChatBI 已进入成熟期,大量企业已在使用智能体,改版须兼顾已有客户。
项目目标
产品的目标
建立智能体从搭建、验证到运行维护的完整管理流程,提高交付效率与问答质量。
我的思考
本期不增减智能体本身的能力,也不改动已有配置与数据,只调整界面的组织方式;需要新能力的部分,不在本期范围内。
BI 平台
准备数据与权限
管理员
懂业务、会写查询,常由业务小组长或数据分析师担任
业务人员
向已启用的智能体提问,点赞或点踩
智能体的一生
管理员的工作以上线为界分为两段:上线前反复补充知识并测试,直至准确率达标;上线后将答错的问题补入样例集或修正知识。流程中的两处判断,准确率是否达标与回答是否正确,分别落在上线前后。
产品研究
业务现状
功能平铺,两处判断均无集中提示
旧版八项功能平铺,没有首页。帮助文档要求准确率达到 90% 再上线,界面上只有顶部横幅提示准确率,数据学习、知识维护与权限配置三项检查没有提示。上线后,点踩、样例 SQL 校验失败与耗时超过 30s的对话分散在不同页面。不少管理员反馈经常找不到功能入口。

竞品表现
同类产品的概览
扣子与火山引擎的智能体分析页以对话数、用户数与 Token 消耗等用量指标为主,用于监控使用情况,不提示智能体能否上线,也不汇总需要处理的回答。


设计决策
进入一个智能体管理后台首页,概览首先应当告诉管理员什么?
- 对于配置前
- 设置配置引导,逐步完成配置,不必先读帮助文档。
- 对于配置后
- 分散的 Agent 运行状态集中到一页,每项直达对应功能。
概览设计
设计突破点
上线前后的两项任务
上线前四项条件需同时可见,上线后三类问题需汇到一处。
判断能否上线
- 关联至少 1 个数据集并完成学习
- 维护业务知识或样例集
- 测试准确率达到 90% 以上
- 配置使用权限
找出待处理问题
- 点踩反馈
- 样例 SQL 校验失败
- 慢对话(超过 30s)
信息重组
分散的状态汇总到概览
旧版状态分散在七个菜单页与横幅,改版汇总到概览三个模块。
将原本分散在不同页面的状态信息,按管理任务重组为概览中的三个模块。
- 顶部横幅的准确率、基础信息、样例集、业务知识库、权限管理上线检查判断能否上线
- 使用追踪的待优化计数与对话历史、样例集的校验结果待办收件箱找出待处理问题
- 基础信息的开关、分析专家、订阅管理、权限管理配置速览确认当前配置
结构骨架
主区内容随智能体状态切换
左上主区放当前任务,其余为辅助区。
搭建中
已上线
方案迭代
初版到改版的三处调整
两版均展示智能体上线后的页面,编号对应同一模块。
- 1关键数字初版在四个数字旁另设健康分,因计算口径未定,改版删除。
- 2上线检查初版位于页面底部;改版在搭建中占据主区,上线后收进页头。
- 3待办收件箱初版位于右栏;改版在智能体上线后占据主区。
初版 · 2026.07
123改版
123搭建中
新建至上线前,概览引导完成四项上线条件。
01 · 主区
上线检查占据主区
新建的智能体进入概览,首屏显示四项上线条件的进度。
- 1进度与规则标题行写明 2/4 已通过,并注明全部通过后可上线。
- 2完成状态已完成项显示绿勾,说明行写明当前结果。
- 3唯一主按钮仅第一个未完成项用主按钮,指明下一步。
只以横幅建议准确率达到 90% 再启用。
02 · 辅助区
空态说明上线后内容
尚无数据的模块保留位置,注明数据何时出现。
- 1数字占位前三个数字以横线占位,注明何时开始统计。
- 2趋势空态网格线占位,注明上线后开始记录每日提问次数。
- 3收件箱预告上线前只显示样例 SQL 校验失败,上线后加入点踩反馈与慢对话。
已上线
上线后,概览转为日常巡查的工作台。
03 · 页头
上线检查收进页头
智能体上线后,上线检查以状态标识留在页头。
- 1状态标识状态标识写明通过项数,不再占用主区。
- 2显示当前值点开浮层,四项显示当前值,如准确率 94%。
- 3直达功能页每项可点,进入对应功能页。
04 · 主区
待办收件箱接替主区
点踩反馈、样例 SQL 校验失败与慢对话集中在主区。
- 1条数与类型标题写条数与类型,说明行写原因或建议。
- 2相对时间以今天、昨天、3 天前标注,近期问题排在前面。
- 3处理入口按钮写明动作,如处理反馈,进入对应功能页。
待优化仅以计数列在提问次数下方。
05 · 辅助区
配置速览列出当前值
六项关键配置的当前取值集中在右上。
- 1当前取值每行显示当前取值,无需逐页打开确认。
- 2数量与状态对象类配置写明数量与状态,如 1 个运行中。
- 3整行可点点击整行进入对应功能页修改,概览只读。
开关类配置收在基础信息的页签中。
06 · 辅助区
数字附说明,趋势按天计数
每个数字下方附一行说明,写明上线要求、口径或相关条数。
- 1对照上线要求准确率下方写明达到 90% 上线要求。
- 2柱形计数每日提问为离散计数,以柱形呈现,悬停显示次数。
- 3当天浅色当天数据尚不完整,以浅灰柱区分。
每日提问次数以面积折线呈现。
07 · 导航 · 主区 · 辅助区
同一计数各处一致
导航徽标、收件箱与关键数字中的同一计数保持一致。
- 1运营徽标徽标 3 即收件箱中的 3 条点踩反馈。
- 2合计一致6 条待处理为三类条数之和。
- 3慢对话计数平均响应耗时下的 2 条超过 30s,即收件箱中的慢对话。
菜单不显示待处理计数。
检查项失效
以准确率降至 86% 为例,失效时页面结构保持不变。
08 · 页头 · 主区 · 辅助区
失效项在三处同时提示
页头、待办收件箱与关键数字同步显示失效信息。
- 1警示色状态标识转为警示色,写明未通过项数。
- 2失效项置顶失效项排在收件箱首行,附处理入口。
- 3数字同步准确率下方转为警示色,注明低于 90%。
方案总览
三种状态下的完整概览页
切换页签查看完整页面,编号对应上文的说明块。
对应 01–02
主区显示上线检查
主按钮跟随第一个未完成项,尚无线上数据的模块显示空态。
对应 03–07
主区显示待办收件箱
上线检查收进页头,待办收件箱汇总三类待处理问题。
对应 08
主区首行显示失效项
状态标识、收件箱首行与准确率说明同时出现警示。
协作流程
我逐页提供真实界面截图供协作 AI 校准,并对关键方案选定或否决;它盘点线上功能,画出导航、概览与评测页等候选。
现状与下一步
从待办收件箱查明错因的页面尚无设计稿,被点踩的问题仍需手动加入评测。开发期间,我会先补这两处:把已有的问题诊断功能接入待办收件箱,让被点踩的问题一键加入评测。开发后,请几位管理员分别打开一个搭建中和一个已上线的智能体,检验他们能否不查阅文档就判断智能体可否上线,并找到需要处理的问题。