# 1. Embedding 模型升级时,从回滚与版本管理视角旧索引的保留期与切换闸门如何设定,灰度期新旧向量混合查询与质量退化后的快速回退如何处理 A 升级后旧索引应立即删除 B 新旧向量空间可以混用 C 升级无需评测即可切换 D 双索引并存过渡,query 与索引版本匹配,旧索引保留期内可快速回退 ✓ 正确答案
# 2. Prompt 版本如何实现类似代码的回滚与可审计 A Prompt 改动无需记录,直接覆盖即可 B 用版本控制存储 Prompt,支持一键回滚,并记录变更与请求命中的版本实现可审计 ✓ 正确答案 C Prompt 无法版本化 D 回滚 Prompt 必须改代码
# 3. 模型权重/版本升级失败时的快速回退链路设计 A 模型回退与缓存无关 B 回退需要重新部署旧模型 C 保留旧模型、网关用别名切换版本,并清理缓存、处理会话,实现分钟级回退 ✓ 正确答案 D 旧模型升级后可立即卸载
# 4. 多区域异步回滚如何保证最终一致而非部分生效 A 各区域独立回滚即可,无需协调 B 用回滚编排器统一协调,版本声明+完成校验,保证各区域最终收敛到同一目标版本 ✓ 正确答案 C 部分生效可接受 D 回滚无需监控跨区域状态
# 5. Prompt/模型/检索三者的版本耦合如何统一治理 A 用版本组合(release)把三者绑定为整体,组合级发布与回滚保证一致性 ✓ 正确答案 B 三者互不依赖 C 三者可独立任选版本组合 D 部分回滚不会造成不一致
# 6. AI 应用的配置即代码(Config as Code)与回滚自动化 A 把配置作为代码版本化管理,走评审与 CI,异常时自动回滚到上一版本 ✓ 正确答案 B 配置变更不需要审计 C 配置回滚必须重启服务 D 配置可随意在线修改,无需版本
# 7. 回滚事件的复盘如何沉淀为评测集防回归 A 回滚样本不可复用 B 回滚后复盘即可,无需记录 C 防回归评测集与回滚无关 D 把回滚根因转化为评测样本加入防回归集,后续版本必跑,防止同类问题复发 ✓ 正确答案
# 8. RAG 知识库内容(文档增删改)如何做快照与按时间点回滚,使答案基线可恢复到指定版本 A 文档删除后无法恢复 B 内容变更做快照、软删除保留历史,内容与索引版本联动,支持按时间点回滚 ✓ 正确答案 C 知识库无需版本化 D 回滚只需删文档即可
# 9. 检索/Rerank 参数变更如何做影子评测与防回归,参数调整前后的效果差异如何量化并留档 A 参数变更可直接上线,无需评测 B 用影子评测与防回归集对比新旧参数效果,量化差异并留档 ✓ 正确答案 C 参数调整前后差异无法量化 D 参数变更无需留档
# 10. 回滚后旧版本生成结果与新版本不一致的用户感知处理 A 对关键场景管理一致性、做透明沟通与版本标注,避免同一会话前后矛盾 ✓ 正确答案 B 用户不会注意到版本差异 C 回滚后的差异无需告知用户 D 回滚后用户看到的答案应完全一致,无需处理
# 11. 回滚演练(Game Day)在 AI 应用中的必要性 A AI 回滚链路复杂,需用 Game Day 验证回滚时长、缓存/会话处理与自动触发逻辑 ✓ 正确答案 B 回滚链路无需演练,平时自然可靠 C 演练会浪费资源,无价值 D 回滚演练只对传统应用有意义
# 12. 灰度期间发现模型退化如何区分偶发与趋势 A 单点波动就判定为退化 B 趋势检测无法实现 C 无需区分,统一回滚 D 用连续窗口与趋势检测(移动平均/CUSUM)区分偶发与持续趋势,趋势才触发熔断 ✓ 正确答案
# 13. 模型版本管理,不可变版本、别名策略与回滚机制应如何设计 A 版本可在线修改,业务直接引用具体版本 B 版本不可变,业务引用别名,回滚通过移动别名指向实现 ✓ 正确答案 C 别名会破坏版本管理 D 旧版本升级后可立即删除
# 14. 回滚触发的人工审批与自动触发边界如何划分 A 明确可量化的指标异常走自动熔断,模糊/高风险/需判断的走人工审批,可自动先切+人工复核 ✓ 正确答案 B 人工审批与自动触发无区别 C 所有回滚都应自动执行 D 所有回滚都应人工审批
# 15. Embedding、知识库与参数三类版本的回滚如何做关联管理,防止只回滚一部分导致状态不一致 A 把 embedding/知识库/参数绑定为版本组合,整体回滚并维护兼容矩阵,防止片面回滚 ✓ 正确答案 B 三类版本可独立回滚互不影响 C 部分回滚不会造成不一致 D 兼容矩阵可有可无
# 16. 提示与配置的版本化,Prompt、参数与模型版本如何联动发布与回滚 A 把三者打包为发布组合,组合级发布与回滚保证一致性 ✓ 正确答案 B 三者可独立发布互不影响 C 换模型无需换 Prompt D 联动回滚没有必要
# 17. 回滚的影响分析,缓存失效、会话上下文与下游依赖应如何处理 A 回滚只需切版本,无需处理其他 B 回滚不影响缓存 C 需处理缓存失效清理、会话上下文兼容与下游依赖,并监控确认回滚正常 ✓ 正确答案 D 下游依赖与回滚无关