Rubric 面试题
共 2 篇真实面经 · 涵盖 快手 / 模思智能(Moss) 等 2 家公司
快手测试二面:Agent 评测体系、Scaffold 适配与线上离线不一致
快手测试岗(Agent 评测方向)二面面经:1 小时、无 coding、全问实习经历——Multi-Model Relay 解决什么问题、适配 10+ Scaffold 的差异与 Checkpoint 状态、三阶段 Handoff 与交接摘要冲突处理、失败如何归因到模型/工具/运行环境/评测标准、两条通过的轨迹如何比较质量与 Rubric 如何避免主观、简历里「通过率提升 25%+、成本降低 30%+」的统计口径、业务报告 Agent 如何防止取数口径错误、如何为 Agent 功能设计上线前评测集与回归流程、线上成功率下降而离线评测无变化的排查顺序,以及购物车功能的测试设计;算法题为三数之和。
模思智能多模态 voice 方向评测岗测评面:Handoff 设计与评测质量缺口
模思智能(Moss)多模态 voice 相关岗位测评面(40 分钟):围绕实习经历深挖——多 Scaffold 适配的差异(如某模型与 Gemini 返回结构与 system 提示词处理的不同)、三阶段 Handoff 与 SWE-Bench 系列难题通过率提升 25%+/推理成本降低 30%+ 的量化口径、Rubric 评测如何做、为什么不把工具计算的数字直接放进上下文、多轮对话中为什么做 Observation 摘要压缩与滑动窗口截断而不是直接开新 session、对 voice Agent 评测的理解、如何判断 coding agent 执行中「任务进度熵」是否在收敛(报错范围是否缩小)、开源项目在做什么,以及对岗位方向的匹配度与意愿确认。