04 · 服务
AI 发布管理
面向 AI 智能
问题所在
智能
我们交付什么
- 每
个 智能 体、模型、技能 和 MCP 服务 器 的 清单:有 登记、有 负责 人、有 版本 - 固定
的 评 测 关 口,每次 变更 都 必须 通过:确定 性 测试 用例、提示 词 注入 测试 与 工具 测试,按 严重 程度 加 权;关键 类别 中 只要 出现 一项 回归,即 阻止 发布 - 每
个 智能 体 的 风险 评 级,包括 欧盟《人工 智能 法案》分类,以及 职工 委员 会 可以 审阅 的 文 档 - 每次
变更 都有 一份 发布 档案:变更 内容、测试 证据、决策、具 名 审批 人 与 回 滚 目标 版本 - 只
允许 追加 的 审计 日志:每 条 记录 都 包含 上 一条 记录 的 哈 希 值,较 早 的 记录 一旦 被 修改 或 删除,验证 时 即可 发现 - 需要
由 LLM 为 输出 评 分 时,使用 经过 校准 的 LLM 评判 器:其 结论 与 人工 评 分 足够 一致 后 才 予 采纳 - 回
滚:一个 可 随时 退回 的 已 验证 版本,并 在 您 需要 之前 就 测试 好 - 运营:按
会话 的 链 路 追踪、单 次 操作 成本、漂移 监 控 与 发布 日历,基于 您 自己 的 Git 发布 流水 线,或 面向 SAP Cloud ALM 与 AI Agent Hub 设计 - 执行
轨迹 核查:委派 给 智能 体 的 任务,只有 记录 的 工具 调 用 显示 必需 步骤 已 成功 执行,才算 完成,而不是 凭 智能 体 自己 的 汇报
如何推进
审计 → 构
- 01
审计
盘
点 当前 运行 的 一切:智能 体、模型、提示 词、工具、负责 人,并 对照 发布 纪律 做 差距 检查:哪些 有 版本、经过 测试、获得 审批、可以 回 滚。 - 02
构
建 建立
发布 流程 本身:用 您 的 真实 案例 搭建 评 测 关 口,配合 风险 评 级、审批 流程、审计 记录 与 回 滚,并 接 入 您 的 流水 线。 - 03
长期
服务 我们
与 您 一起 运营 这 道 关 口:每一 次 更换 模型、修改 提示 词 都要 通过 它,测试 集 也 随 每一 次 事件 不断 扩充。
相关行业
以下
常见问题
如何知道 LLM 评判器的判断是对的?
先
“AI 发布管理”在实践中意味着什么?
对
为什么更换模型也算一次发布?
因为
这需要 SAP 吗?
不需要。这
这对欧盟《人工智能法案》有帮助吗?
它
用 30 分钟把事情谈清楚。
带