多模态大模型算法
共 2 篇面经 · 快手 / 百度
快手 多模态大模型算法 一面:DPO 与 GRPO 的区别与零梯度陷阱
快手多模态大模型算法一面,题目短但密度很高:从 DPO、SFT、GRPO 三者的定位差别与 DPO 更像谁,到 DPO 的优化目标和数据筛选要点,再到 GRPO 里样本全对全错为什么梯度为 0、奖励方差与 DVPO,最后是 PanoVision 与 VL 模型的对比和项目奖励函数的设计缺陷。
百度多模态大模型一面(9.10):PPO 与 GRPO、DPO、持续学习、8 卡 A100 跑 7B VL 的 GRPO
百度 2026 年 9 月 10 日多模态大模型一面:项目深挖后进入训练目标与持续学习(PPO 与 GRPO 的差异、为什么做 DPO、持续学习的方法分类),再到 8 张 A100 训练 7B 视觉语言模型的 GRPO 场景题(Rollout / 推理加速、训练加速、验收指标)、通用训练加速手段、DeepSpeed ZeRO 三阶段、多头注意力变体(MQA/GQA/MLA/滑窗/稀疏)与 verl 类框架的加速机制,最后手撕 MHA。