大数据开发

我是做大数据开发的，目前也干4年了，平时都是和业务对需求和计算口径，有时开会都要开半天，平时和产品和运营接触的多，感觉做大数据不是在做需求就是在接需求路上

卓驭 嵌入式中间件实习 面经写一写面经，回馈一下社区。⌚️timeline：五月底👋part1：自我介绍 && 项目介绍1. 项目里的内存占用，资源使用的性能评估？性能优化的思考？2. 端侧大模型的选型？3. 机器人比赛中最难的一个问题？技术方案的选择用了多长的时间？4. 之前实习的主要工作？方案是如何确定的？5. 对车载中间件的了解？6. 。。。忘了🤏part2：八股拷打1. 设计模式？平时开发有用到过哪一些设计模式吗？2. 对多态的了解？静态and动态?3. 虚函数里面父类和子类的交互？4. C++容器中vector和list的差异？5. vector的底层实现原理？扩...

1.介绍一下项目以及项目中用到的一些大数据组件2.HDFS的文件存储格式有哪些?3.MapReduce过程，MapTask和ReduceTask个数怎么确定?4.MapReduce阶段哪些因素会影响性能?5.Flink和Spark Streaming的区别是什么?6.Kafka的消息传递机制是怎样的?7.大数据处理中的一致性、可靠性、可用性如何权衡?8.数据仓库和数据湖的区别是什么?9.Hive和传统数据库的区别?10.Spark如何进行数据倾斜的优化?

1.实习介绍2.能理解为你的项目就是对指标和标签做一个规范整理吗?3.你在切换标签的时候如何保障数据质量?4.你在实习过程中有遇到过数据倾斜的情况吗?你是如何解决的?5.标签存储用的是什么数据库?6.用Doris存储主要是为了加快查询，你有遇到过下游报表查数慢但不是数据倾斜的情况吗?你是如何解决的?7.两道Sql:(1)很简单;(2)找出那些有5个下属的经理id及其名称8.能实习多久?实验室有要求出勤吗?base地能否接受?9.面试官介绍部门业务线。10.反问环节。