阿里淘天三面面经

发面经攒人品中...欢迎评论区交流～1.项目介绍2.介绍一下 CLIP3.了解 LORA 吗，LORA 微调的原理是什么4.了解哪些多模态大模型，简要介绍几个5.BLIP 的三个损失函数分别是什么，数据是怎样清洗的6.BLIP2 相对于 BLIP 有哪些改进，BLIP3 又有哪些改进7.Qwen-VL的三个训练流程分别是什么，有什么作用8.视觉编码器和 LLM 连接时，使用 BLIP2中 O-Former 那种复杂的 Adaptor 好还是 LLaVA中简单的 MLP 好，说说各自的优缺点9.代码:实现多头自注意力

前言：为什么要学习C++八股文？在当前的技术面试中，C++作为系统级编程语言的代表，一直是各大互联网公司、游戏公司、金融科技公司的热门岗位。无论是腾讯、阿里、字节跳动等互联网大厂，还是华为、中兴等通信企业，C++开发岗位的需求持续旺盛。然而，很多同学在面试时却屡屡碰壁：基础不牢：指针、引用、内存管理等核心概念模糊知识零散：学了很多但不成体系，面试时答不上来实战不足：只会写简单代码，不懂底层原理和性能优化准备盲目：不知道面试重点，浪费大量时间本文将系统性地为你梳理C++面试的核心知识点，帮助你高效备战，拿下心仪的offer！一、C++面试考什么？大厂面试题型分析1.1 基础语法与特性（必考）高频...

1.项目经历2.模型的 loss 函数前乘以10，会对训练造成什么影响？3.deepseek v3的 rope 实现？ deepseek r1的训练过程？4.做过 rag 是吗？介绍 graph rag ?5.bge 和 gte 模型怎么训练的？为什么不能直接用 bert - base 来做余弦相似度召回？6.对比学习的常用 loss 有哪些？ InfoNCE 的超参数？温度系数对训练的影响？7. gradient checkpointing 原理？ gradient _ accumulation 原理？8.多模态大模型的预训练原理？预训练一般分为几个阶段？ ViT 现在一般用什么方法进行预训练？9. 手撕：梯度下降求平方根。

上班摸鱼，翻了2025年至今牛客网的阿里系面经，包括阿里云智能、达摩院（通义实验室）、阿里云计算平台以及阿里妈妈等机构，整理了算法工程师的常见面试内容，希望对想冲大厂的你有所帮助^ ^ 核心架构演进：Transformer组件的细粒度考察 Transformer架构作为现代大模型的基石，其考察深度在2025年达到了前所未有的水平。面试官默认候选人已经熟悉基本结构，转而主要攻击架构中的具体组件选型及其背后的数学原理。 位置编码（Positional Encoding）：从绝对到相对的演变  RoPE (Rotary Positional Embeddings): 42次 ALiBi (Atten...