# 1. Human-in-the-loop 的触发条件设计,风险阈值 vs 置信度 A 只按置信度触发即可,风险无关紧要 B 风险阈值是底线(高风险必有人确认),置信度是补充(低置信也介入),两者按风险×置信度矩阵配置 ✓ 正确答案 C 风险阈值应被模型置信度覆盖,完全可忽略 D 触发条件应固定,无需随业务调优
# 2. Agent 升级给人类时的上下文摘要如何保证决策所需信息完整 A 摘要越短越好,只写"请批准"即可 B 原始轨迹不应暴露给人类,避免信息过载 C 升级摘要应包含目标、现状、原因、建议、关键证据与待决决策点,并提供摘要+展开原始轨迹的两级结构 ✓ 正确答案 D 摘要无需标注不确定性,直接给结论即可
# 3. 多 Agent 系统中"监督者"如何判断是否需要人类仲裁 A 任何子 Agent 冲突都应立即升级人类 B 监督者应先尝试 Agent 内自动协调与规则裁决,只有在冲突无法调和、低置信或高风险时才升级人类仲裁 ✓ 正确答案 C 监督者不能区分可自动裁决与必须人定的分歧 D 人类仲裁应避免,无论多高风险
# 4. 自动化偏差,人类过度信任 Agent 输出导致审批流于形式,如何用盲审、抽样复核与异议率监控缓解? A 异议率越低越说明审批高效,无需监控 B 审批人越信任 Agent,审批越高效,无需干预 C 应用盲审(隐藏结论)、抽样复核、异议率监控来发现并纠正"审批流于形式"的自动化偏差 ✓ 正确答案 D 盲审应向审批人展示 Agent 结论,保证信息完整
# 5. 多级审批链,按金额与风险逐级上报的审批层级如何与 Agent 任务状态联动,各级通过/拒绝如何流转? A 按金额/风险映射审批层级,用状态机管理通过/拒绝/回退/终止的流转,并与 Agent 任务状态联动 ✓ 正确答案 B 审批层级应由 Agent 自行决定,无需规则 C 审批状态与 Agent 任务状态无关,各自独立 D 驳回后应直接终止,不允许回退重提
# 6. 人在回路反馈如何回流为 Agent 策略的改进信号 A 三种反馈完全等价,转化方式相同 B 人类反馈只用于本次任务,无需沉淀 C 纠错转反例/规则、评分转偏好信号、示范转 few-shot 示例,标准化后分流到不同改进通道并衡量可复用性 ✓ 正确答案 D 所有反馈都应直接进模型微调,无需区分
# 7. 审批交互的 UX 如何兼顾安全与流畅(不频繁打断) A 所有审批都应打断式弹窗,保证安全 B 打断越频繁越安全,应尽量多打断 C 按风险分级与聚合批量审批减少打断,高风险单独强确认、低风险进待办队列,把打断留给真正重要的 ✓ 正确答案 D 低风险审批也应强制在线打断,保证严谨
# 8. 长任务 Agent 崩溃后如何从最近检查点恢复而非重跑 A 应在关键步骤落检查点保存状态,崩溃后从最近检查点恢复,并保证工具调用幂等避免重复副作用 ✓ 正确答案 B 崩溃后只能从头重跑,无法恢复 C 检查点应每个 token 都保存,保证不丢失 D 恢复后无需校验状态一致性,直接继续即可
# 9. 多步任务的部分失败如何做补偿(补偿事务/Saga 模式) A 一步失败就整体作废,无需补偿 B 补偿动作不需要幂等,重复执行无妨 C 用 Saga 模式定义每步的补偿动作,失败时逆序补偿并保证幂等与可靠,区分可补偿/不可补偿步骤 ✓ 正确答案 D 不可补偿的步骤也应自动回滚处理
# 10. 跨会话的 Agent 如何继承未完成目标而不重复已做步骤 A 跨会话后应从零重新执行,无法继承 B 已执行步骤无需记录,重跑也无妨 C 恢复时无需注入历史执行摘要,直接重新规划即可 D 持久化任务状态,记录已执行步骤与幂等键,恢复时跳过已完成步骤直接续跑,避免重复执行 ✓ 正确答案
# 11. Human-in-the-loop 的设计,审批点位置、审批超时与无人响应时的降级策略应如何按风险等级配置 A 按风险等级配置:高风险超时默认拒绝/挂起,中风险放行并告警或升级,低风险自动放行 ✓ 正确答案 B 无人响应时不应有任何降级策略 C 低风险任务超时也应挂起等待,保证保守 D 所有任务超时后都应自动放行,保证效率
# 12. HITL 的审计与留痕,审批人、时间、上下文摘要与决策依据的记录如何满足合规要求与复盘? A 决策依据与审批进度无关,无需记录 B 只需记录最终结论,过程无需留痕 C 审计记录可以事后随意修改,无需防篡改 D 应记录审批人、时间、结论、上下文摘要、决策依据与当时数据快照,并不可篡改、可追溯,满足合规与复盘 ✓ 正确答案
# 13. 反馈形式工程化,纠错、评分与示范三种反馈如何转化为可复用的改进信号? A 三种反馈完全等价,转化方式相同 B 示范反馈应转成规则校验,而非示例 C 反馈标准化后无需区分可复用性,一律全量使用 D 纠错转反例/规则、评分转偏好信号、示范转 few-shot 示例,标准化后分流到不同改进通道并衡量可复用性 ✓ 正确答案
# 14. Agent 自修复能力的可观测性,修复成功率如何度量 A 埋点记录修复事件,用修复成功率、修复轮数、耗时、成本等指标按维度拆分度量,并区分修复成功与真正解决根因 ✓ 正确答案 B 修复成功率与修复成本无关,只看成功率即可 C 修复成功率无法度量,只能定性观察 D 修复事件无需埋点,只能事后人工统计
# 15. 人工审核的队列与 SLA,等待时长、自动放行与降级策略应按风险等级如何配置 A 按风险等级配置:高风险插队/较短 SLA/超时保守降级,低风险容忍等待,并监控队列积压与 SLA 达成率 ✓ 正确答案 B 队列积压无需监控,不影响审核 C 高风险任务应最长 SLA 排队,保证公平 D 所有任务 SLA 相同,降级策略相同
# 16. 风险场景的 HITL,金融、医疗、法律等场景的审批点与责任边界有何特殊要求,合规留痕如何设计 A 高风险动作可由 Agent 事后补审批,无需前置 B 审批点前置、责任边界清晰、留痕不可篡改且满足监管,Agent 提供可解释建议、人类负责任批准 ✓ 正确答案 C 责任边界无需明确,可模糊处理 D Agent 建议无需可解释,人类直接批准即可
# 17. 审核效率,批量审核、规则预审与风险分层抽样应如何组合,在覆盖度与人力成本之间取得平衡 A 所有审核项都人工全量审核,保证覆盖 B 低风险项无需任何审核,直接放行 C 规则预审筛低风险、批量审核提吞吐、风险分层抽样(高风险全量、低风险抽样)定向投入,兼顾覆盖与成本 ✓ 正确答案 D 抽样错误率升高时无需调整抽样比例
# 18. HITL 的分级模型,human-in-the-loop/on-the-loop/out-of-the-loop 在任务设计中的适用边界? A 所有任务都应采用 out-of-the-loop,完全自动化 B in-the-loop 效率最高,应优先使用 C in/on/out 三种模式不可混合,只能整任务选一种 D 按风险与错误代价选择分级:高风险用 in-the-loop、常规可监控用 on-the-loop、低风险海量用 out-of-the-loop,并可混合与升级 ✓ 正确答案
# 19. 审批委派与代理,审批人不在线时的委派、值班与角色代理如何配置,审计如何记录实际审批人? A 提供委派、值班与角色代理机制避免流程卡死,并审计记录实际审批人及委派/代理关系,保证责任可追溯 ✓ 正确答案 B 审计只需记录名义审批人,与实际不相关 C 委派可无范围限制、无期限,自由进行 D 审批人不在线时应让流程挂起等待,不做任何委派