02 · 企业可控

ChatBI 管理后台

让管理员无需查阅文档即可判断智能体能否上线,并在上线后找到需要处理的问题

0726

AI Agent · B 端 · 已评审

项目背景

本项目是 ChatBI 的智能体管理后台。管理员(懂业务、会写查询,常由业务小组长或数据分析师担任)在这里搭建和维护智能体,业务人员通过自然语言向智能体查询业务数据。每个智能体对应一个问数场景,单独交付与维护。

类型
企业 Agent 配置管理
角色
B 端体验设计师
时间
2026.7
工具
Figma · Codex · Claude
状态
开发中

项目快照

核心问题

管理员进入一个智能体后,只能在平铺的八项菜单之间自行判断它所处的阶段与下一步工作。如何让管理员不查阅文档即可判断智能体能否上线,并在上线后找到需要处理的问题?

改版后 · 概览

改版后的概览页(已上线):标题旁为上线检查状态标识,主区为待办收件箱

产品阶段

产品生命周期曲线:引入期、成长期、成熟期、衰退期,ChatBI 当前处于成熟期

ChatBI 已进入成熟期,大量企业已在使用智能体,改版须兼顾已有客户。

项目目标

产品的目标

建立智能体从搭建、验证到运行维护的完整管理流程,提高交付效率与问答质量。

我的思考

本期不增减智能体本身的能力,也不改动已有配置与数据,只调整界面的组织方式;需要新能力的部分,不在本期范围内。

  1. BI 平台

    准备数据与权限

  2. 管理员

    懂业务、会写查询,常由业务小组长或数据分析师担任

  3. 业务人员

    向已启用的智能体提问,点赞或点踩

智能体的一生

管理员的工作以上线为界分为两段:上线前反复补充知识并测试,直至准确率达标;上线后将答错的问题补入样例集或修正知识。流程中的两处判断,准确率是否达标与回答是否正确,分别落在上线前后。

BI平台智能体管理(管理员)问数/洞察智能体(业务人员) 准备数据配置权限新建智能体关联数据集 企业知识智能体测试准确率 用户问答是否正确查看运维日志 通用知识业务知识样例集 添加知识模型学习 无高有 低是否

产品研究

业务现状

功能平铺,两处判断均无集中提示

旧版八项功能平铺,没有首页。帮助文档要求准确率达到 90% 再上线,界面上只有顶部横幅提示准确率,数据学习、知识维护与权限配置三项检查没有提示。上线后,点踩、样例 SQL 校验失败与耗时超过 30s的对话分散在不同页面。不少管理员反馈经常找不到功能入口。

旧版智能体详情页:默认进入使用追踪,左侧八项菜单平铺,顶部黄色横幅提示准确率 0%

竞品表现

同类产品的概览

扣子与火山引擎的智能体分析页以对话数、用户数与 Token 消耗等用量指标为主,用于监控使用情况,不提示智能体能否上线,也不汇总需要处理的回答。

扣子 智能体分析页
扣子智能体分析
火山引擎 DataAgent 审计 使用记录
火山引擎 DataAgent审计 · 使用记录

设计决策

进入一个智能体管理后台首页,概览首先应当告诉管理员什么?

对于配置前
设置配置引导,逐步完成配置,不必先读帮助文档。
对于配置后
分散的 Agent 运行状态集中到一页,每项直达对应功能。

概览设计

设计突破点

上线前后的两项任务

上线前四项条件需同时可见,上线后三类问题需汇到一处。

判断能否上线

  • 关联至少 1 个数据集并完成学习
  • 维护业务知识或样例集
  • 测试准确率达到 90% 以上
  • 配置使用权限
上线检查

找出待处理问题

  • 点踩反馈
  • 样例 SQL 校验失败
  • 慢对话(超过 30s)
待办收件箱

信息重组

分散的状态汇总到概览

旧版状态分散在七个菜单页与横幅,改版汇总到概览三个模块。

将原本分散在不同页面的状态信息,按管理任务重组为概览中的三个模块。

  • 顶部横幅的准确率、基础信息、样例集、业务知识库、权限管理上线检查判断能否上线
  • 使用追踪的待优化计数与对话历史、样例集的校验结果待办收件箱找出待处理问题
  • 基础信息的开关、分析专家、订阅管理、权限管理配置速览确认当前配置

结构骨架

主区内容随智能体状态切换

左上主区放当前任务,其余为辅助区。

搭建中

导航
页头
上线检查
配置速览
关键数字
问答趋势(空态)
待办收件箱(空态)

已上线

导航
页头与状态标识
待办收件箱
配置速览
关键数字
问答趋势

方案迭代

初版到改版的三处调整

两版均展示智能体上线后的页面,编号对应同一模块。

  1. 1
    关键数字初版在四个数字旁另设健康分,因计算口径未定,改版删除。
  2. 2
    上线检查初版位于页面底部;改版在搭建中占据主区,上线后收进页头。
  3. 3
    待办收件箱初版位于右栏;改版在智能体上线后占据主区。

初版 · 2026.07

初版概览页:左上为健康分圆环与四个指标,下方为问答趋势与上线检查清单,右栏为待办收件箱与配置速览123

改版

改版概览页(已上线):上线检查收进标题旁的状态标识,待办收件箱占据左上主区,测试准确率为第一个关键数字123
A

搭建中

新建至上线前,概览引导完成四项上线条件。

01 · 主区

上线检查占据主区

新建的智能体进入概览,首屏显示四项上线条件的进度。

  1. 1
    进度与规则标题行写明 2/4 已通过,并注明全部通过后可上线。
  2. 2
    完成状态已完成项显示绿勾,说明行写明当前结果。
  3. 3
    唯一主按钮仅第一个未完成项用主按钮,指明下一步。
旧版

只以横幅建议准确率达到 90% 再启用。

02 · 辅助区

空态说明上线后内容

尚无数据的模块保留位置,注明数据何时出现。

  1. 1
    数字占位前三个数字以横线占位,注明何时开始统计。
  2. 2
    趋势空态网格线占位,注明上线后开始记录每日提问次数。
  3. 3
    收件箱预告上线前只显示样例 SQL 校验失败,上线后加入点踩反馈与慢对话。
B

已上线

上线后,概览转为日常巡查的工作台。

03 · 页头

上线检查收进页头

智能体上线后,上线检查以状态标识留在页头。

  1. 1
    状态标识状态标识写明通过项数,不再占用主区。
  2. 2
    显示当前值点开浮层,四项显示当前值,如准确率 94%。
  3. 3
    直达功能页每项可点,进入对应功能页。

04 · 主区

待办收件箱接替主区

点踩反馈、样例 SQL 校验失败与慢对话集中在主区。

  1. 1
    条数与类型标题写条数与类型,说明行写原因或建议。
  2. 2
    相对时间以今天、昨天、3 天前标注,近期问题排在前面。
  3. 3
    处理入口按钮写明动作,如处理反馈,进入对应功能页。
旧版

待优化仅以计数列在提问次数下方。

05 · 辅助区

配置速览列出当前值

六项关键配置的当前取值集中在右上。

  1. 1
    当前取值每行显示当前取值,无需逐页打开确认。
  2. 2
    数量与状态对象类配置写明数量与状态,如 1 个运行中。
  3. 3
    整行可点点击整行进入对应功能页修改,概览只读。
旧版

开关类配置收在基础信息的页签中。

06 · 辅助区

数字附说明,趋势按天计数

每个数字下方附一行说明,写明上线要求、口径或相关条数。

  1. 1
    对照上线要求准确率下方写明达到 90% 上线要求。
  2. 2
    柱形计数每日提问为离散计数,以柱形呈现,悬停显示次数。
  3. 3
    当天浅色当天数据尚不完整,以浅灰柱区分。
旧版

每日提问次数以面积折线呈现。

07 · 导航 · 主区 · 辅助区

同一计数各处一致

导航徽标、收件箱与关键数字中的同一计数保持一致。

  1. 1
    运营徽标徽标 3 即收件箱中的 3 条点踩反馈。
  2. 2
    合计一致6 条待处理为三类条数之和。
  3. 3
    慢对话计数平均响应耗时下的 2 条超过 30s,即收件箱中的慢对话。
旧版

菜单不显示待处理计数。

C

检查项失效

以准确率降至 86% 为例,失效时页面结构保持不变。

08 · 页头 · 主区 · 辅助区

失效项在三处同时提示

页头、待办收件箱与关键数字同步显示失效信息。

  1. 1
    警示色状态标识转为警示色,写明未通过项数。
  2. 2
    失效项置顶失效项排在收件箱首行,附处理入口。
  3. 3
    数字同步准确率下方转为警示色,注明低于 90%。

方案总览

三种状态下的完整概览页

切换页签查看完整页面,编号对应上文的说明块。

对应 01–02

主区显示上线检查

主按钮跟随第一个未完成项,尚无线上数据的模块显示空态。

0102030405060708

协作流程

我逐页提供真实界面截图供协作 AI 校准,并对关键方案选定或否决;它盘点线上功能,画出导航、概览与评测页等候选。

协作流程时间线:00 接手之前、01 第 0 轮、02 初版原型、03 确定范围、04 完整界面稿、05 交互细节、06 团队评审,各节点列出日期、要点与参与方

现状与下一步

从待办收件箱查明错因的页面尚无设计稿,被点踩的问题仍需手动加入评测。开发期间,我会先补这两处:把已有的问题诊断功能接入待办收件箱,让被点踩的问题一键加入评测。开发后,请几位管理员分别打开一个搭建中和一个已上线的智能体,检验他们能否不查阅文档就判断智能体可否上线,并找到需要处理的问题。