选型指南 架构设计 含可复制代码

把评测结论写进发布说明

目录层用 SSG 加 ISR 拿收录,工具层用一份 JSON Schema 承接 91 个站内工具,密钥、计费与限流全部收口在国内业务后端,模型调用统一走一层薄适配。这篇把我们真实的目录结构、Schema 字段定义、路由闸门、预扣结算伪代码和合规清单完整摊开。

陈
陈默架构组
2026-09-28 · 14 分钟阅读 · 8,432 次浏览

半年前的发布说明,能否看出当时改了什么、效果如何、为什么这么改?

发布说明里该有"评测结论"

版本发布说明常写"优化了回答质量""修复若干问题" ✗ —— 这些话无法验证 ✔,

半年后回看也不知道当时到底改了什么、有没有效果 ✔。

把评测结论写进发布说明 ✔,改动就变成了可追溯的证据 ✔。

一、一条发布说明该有的六项

```

① 改了什么(一句话,具体到能力 ✔)

② 为什么改(动机 + 证据来源:事故/反馈/评测 ✔)

③ 评测结论(哪批评测集、指标前后、区间 ✔)

④ 影响面(哪些功能、哪些用户、要不要用户操作 ✔)

⑤ 回滚方式(怎么退回去 ✔)

⑥ 未解决(如实写 ✔)

```

第 ③ 项是分水岭 ✗→✔:有它才叫"发布说明" ✔,没它只是"变更通知" ✔。

二、评测结论怎么写(三条要求)

1. 带上对比基线("相对上一版" ✔ 而不是孤立的绝对数字 ✔);

2. 带上不确定(区间或样本量 ✔ —— 见小样本那篇 ✔);

3. 带上失败类型变化(总量没变但编造变多,也是退化 ✔ —— 见失败分类 ✔)。

示例 ✔:

```

主指标:可接受率 88% → 91%(+3 点;n=120;净胜 4 条,区间跨 0,未达显著)

失败类型:格式错 -2 条;该拒答却作答 0 → 1 条(新增,已在冒烟集加重)

成本:单位成本 +6%(在预算 ×1.2 内)

```

这段比一千字"优化了体验"都有用 ✔。

三、让这件事不靠自觉

· 发布说明模板(六项固定 ✔ —— 与"改动检查清单"同一套 ✔);

· 门禁挂钩(没有评测结论不许合并 ✔ —— 见发布门禁 ✔);

· 集中存放(一处能看全部历史 ✔);

· 季度回看(哪些改动真的有效?哪些白做了?✔ —— 这是很有价值的复盘 ✔)。

四、三个反模式

· 只写"优化/提升" ✗(无法验证 ✔);

· 只给绝对数字 ✗(没有基线,无法判断好坏 ✔);

· 报喜不报忧 ✗(失败类型新增也不写 ✔ → 后人踩坑 ✔)。

一条判据

> 随机打开半年前的一条发布说明 ✔,能否知道"当时改了什么、效果如何、为什么这么改" ✔?

> 不能,说明发布说明还没接入评测 ✗。

本文由云枢 AI导航整理,内容以官方来源为准。

相关文章

顺序阅读

← 上一篇:把提示词当接口来设计:输入输出契约
下一篇:AI 功能的并发控制:同一用户重复提交怎么办 →

第 139 / 171 篇

术语速查 · 本页出现的 12 个词展开看中文名与一句话解释,点术语看完整条目
  • token词元:模型处理文本的最小单位,中文约 1–2 个汉字;计费与上下文长度都按它算。
  • 转写 / 字幕Transcription:把音视频人声逐句变成带时间戳的文字稿,便于做字幕与章节切分。
  • SSE服务器发送事件:服务器通过长连接持续推送增量文本,是对白逐字出现的常见实现。
  • API应用编程接口:程序之间约定的调用方式;站内工具由服务端调用,浏览器里不出现密钥。
  • CDN内容分发网络:把静态资源缓存到离用户更近的节点,缩短加载时间。
  • 缓存Cache:把结果暂存复用,复用得越多平均耗时越低;需要约定过期与刷新策略。
  • 限流Rate Limit:限制单位时间内的请求次数,防止单用户或异常流量打满服务端。
  • SSG静态站点生成:构建阶段就生成 HTML,访问时直接返回,不必每次请求都渲染。
  • ISR增量静态再生:先返回静态页,再在后台按需重新生成,兼顾速度与更新时效。
  • 灰度发布Canary Release:先让一小部分用户用新版本,确认无误再放量,出问题的爆炸半径最小。
  • 提示词Prompt:交给模型的指令文本;写清角色、任务、输入与输出格式比反复试更省。
  • 积分Credits:站内计费单位:按工具单价预扣,调用失败自动退还;单价以定价页为准。

完整解释与站内出现处见 AI 术语表(40 条)。