百度大模型算法一面-日常实习
1.八股:RoPE 为什么能实现相对位置编码?它相比传统绝对位置编码在长文本推理中有什么优势?
2.八股:LoRA 的 A、B 矩阵通常如何初始化?为什么 B 矩阵要初始化为全零?反过来会有什么问题?
3.八股:在参数高效微调中,为什么优先微调 Attention 层的 Q/K/V/O,而不是 FFN 层?
4.项目:RAG 的整体流程是怎样的?哪些环节最容易成为性能瓶颈?
5.项目:RAG 中常见的中间文档丢失中间丢失现象如何缓解?
6.项目:GraphRAG 系统整体流程是怎样的?从用户提问到最终生成答案,哪些模块是你独立负责的?
7.项目:GraphRAG 相比传统 RAG 的核心优势?
8.项目:GraphRAG 怎么保证召回准确率?
9.项目:数据集中如果有噪声的话, 会导致幻觉, 这里怎么处理的?
10.代码题:编辑距离(LeetCode 72)
2.八股:LoRA 的 A、B 矩阵通常如何初始化?为什么 B 矩阵要初始化为全零?反过来会有什么问题?
3.八股:在参数高效微调中,为什么优先微调 Attention 层的 Q/K/V/O,而不是 FFN 层?
4.项目:RAG 的整体流程是怎样的?哪些环节最容易成为性能瓶颈?
5.项目:RAG 中常见的中间文档丢失中间丢失现象如何缓解?
6.项目:GraphRAG 系统整体流程是怎样的?从用户提问到最终生成答案,哪些模块是你独立负责的?
7.项目:GraphRAG 相比传统 RAG 的核心优势?
8.项目:GraphRAG 怎么保证召回准确率?
9.项目:数据集中如果有噪声的话, 会导致幻觉, 这里怎么处理的?
10.代码题:编辑距离(LeetCode 72)
全部评论
相关推荐
12-22 17:06
中国地质大学(武汉) Java 点赞 评论 收藏
分享
12-22 21:57
武汉大学 Java 点赞 评论 收藏
分享
点赞 评论 收藏
分享
查看2道真题和解析