字节AML高性能计算提前批一面经

【实习】大模型强化学习基建与算法研发实习生📍 地点： [北京/上海/深圳] ⏱️ 形式： 实习（建议至少 3-6 个月）岗位职责 (Responsibilities)作为大模型基建团队的核心成员，你将参与最前沿的多模态大模型（VLM）后训练体系建设。你将直面大规模强化学习训练中的算法与系统挑战，核心职责包括：多模态工具调用能力建设： 负责多模态模型在 Tool Use / Function Calling 场景下的后训练（Post-training）流程搭建与优化，通过 SFT 及 RL 提升模型对复杂工具的理解与调用准确率。强化学习算法优化： 深入研究并改进主流对齐算法，针对多模态数据特性设计强化学习算法策略，解决奖励稀疏与训练不稳定问题。训练系统基建与性能调优： 参与大规模分布式强化学习训练框架的研发与维护，负责显存优化、通信优化及流水线并行策略调优，提升训练吞吐量与稳定性。前沿技术探索： 跟踪大模型多模态推理的最新论文，并将前沿算法快速复现并落地到内部基建中。任职要求 (Qualifications)学历背景： 计算机、人工智能、数学等相关专业硕士或博士在读，具有扎实的机器学习/深度学习理论基础。代码能力： 精通 Python 编程，熟练使用 PyTorch，具有优秀的代码风格和工程实现能力。算法基础：深入理解 Transformer 架构及 LLM/VLM 基本原理。熟悉强化学习基本理论，理解强化学习算法细节。加分项 (Preferred Qualifications)：工具调用经验： 有 LLM Tool Learning、Agent 或 ReAct 相关的实战经验。基建经验： 熟悉 DeepSpeed, Megatron-LM, vLLM, Ray 等分布式训练/推理框架源码，或有 CUDA 算子优化经验。多模态经验： 熟悉 LLaVA, Qwen-VL 等多模态模型架构。开源/学术： 在顶级会议发表过论文，或在 Hugging Face / GitHub 有高 Star 开源项目贡献。

1.你的 Agent 系统Prompt 是怎么设计和迭代的？有没有做过 Prompt 自动优化？当用户提出不完整的请求时，如何补全用户意图的？2.构建 Agent 的时候，遇到过哪些瓶颈？LangChain 的 memory 默认机制在多3.用户并发中怎么做隔离？你是如何保证线程安全的？4.微调 Llama2 你是怎么选择训练样本的？清洗逻辑是什么？你有没有观察到哪些训练样本质量问题对模型行为有很大影响？举例说明。5.DPO相比 SFT，有哪些优劣？它在 Agent 任务上效果提升明显吗？你怎么构造偏好对？构造逻辑是自动的还是人工？6.你说你服务部署在 vLLM 上，为何选择它？KV-cache 如何帮助推理加速？你自己做过哪些优化？7.假如需要支持 Streaming 输出，但当前服务延迟又超标，你会怎么折中设计？8.多轮对话上下文状态管理是如何做的？如何在高并发场景下保证一致性？9.你做的 Agent 使用了多少个外部工具，在调用链条上如何保障故障容错和超时机制？10.有没有做过工具调用失败后的feedback策略设计？11.训练过程中数据来自用户行为日志，你是如何从这些数据中抽取训练对话的？有没有做过归一化或事件抽象？12.有没有了解过带有时间窗口/偏移限制的对话系统？模型怎么“理解时间”？13.你觉得 Agent 哪些模块最容易在真实业务中出问题？你会如何监控和定位的？

好几天没更新，这几天又接了好几个面试，分享一些1. 两个项目怎么部署的，是单机吗，还是有部署到服务器上?2. 分布式锁怎么做到控制多台服务器的并发问题？3. 锁是什么东西？4. 为什么一些锁只能在单机用？5. hashmap底层实现原理？6. 什么时候用链表什么时候用红黑树7. hashmap不安全时会有啥问题？8. springmvc工作原理？9. spring的单例咋实现的？10. aop原理？11. 怎么做到封装切面实现？12. java代码怎么开启线程？13. 线程有哪些状态？14. 说说AQS吧?15. AQS怎么做到锁重入?16. mysql索引类型?17. 联合索引什么情况会失效,你不是有做项目吗结合你项目说一说？比如说abc 联合索引什么情况会失效？18. 来写两个sql吧1）有一张订单表 里面有用户id订单id 时间和商品数量 统计七天内的下单量 怎么做2）统计各个用户的下单量19.acid说说，详细说说20.各个隔离级别会出现什么并发问题21.查商户管理 怎么会出现脏读22.之前的项目为啥要用redis23.库存的超卖咋做的24.乐观锁怎么实现,代码怎么写的25.库存的超卖乐观锁怎么设计的26.对未来的规划27.个人方面的自我介绍

字节后端，28*15，应该是白菜小sp的级别吧，不太了解，因为已经接了别的