数仓个人发展和未来怎么成长?

投票
#校招#  #数据仓库#  #数据人的面试交流地#
0.数开/数仓怎么规划自己?
首先我们要先入门(找到一份数据开发类的工作)
其次我们要判断当前在公司是否能接触数仓或者一些定制数据开发,接触可以好好打磨几个项目/几个需求,接触不到就考虑跟着辉哥带练项目学习
再然后我们应该朝着两个方向发展
第一:对当前项目/需求涉及的数据源>所有表关系 掌握牢固,并深度理解业务的产生到结束各个流程中产生的数据和表,这就是我们常说的懂业务(技术侧完全够了,不需要掌握业务为什么这么做),再其次就是利用自己的数仓能力/开发能力进行高效的交付,保证你非常懂表,离不开你(这是过程,建议多去熟悉每个接触的业务),然后要熟悉目前的数仓架构,或者跟着辉哥学数仓,这个1-3年左右可以发展成一名合格的大头兵
第二:对技术架构非常熟悉,怎么去熟悉呢?
1. 掌握离线/实时 侧常见的技术的最佳实践(iceberg paimon doris flink spark等),还要掌握数仓中各种疑难杂症,比如数仓规范建设、数仓分层、数仓域划分、质量监控、排期经验、与报表同学对接经验等等,这个最终可以发展成数据开发侧的架构师
数仓/数开的职业发展前景怎么样
1. 数据开发这一类岗位 每个人的发展都可能不太一样【一直做一线大头兵、做集团数据负责人、技术组件负责人、转型算法\数分\研发、回老家做生意、被淘汰坚持不下去等等】
数仓未来的发展趋势(岗位数量...)/当前这个岗位类型的业务瓶颈是什么
2. 有成长空间,数据技术会变得越来越易用和低成本,企业用大数据的也会越来越多,岗位也会多,这个过程中我们要多接触新的技术架构和解决方案 比如辉哥近期可能要探索paimon了,iceberg玩几个月 感觉比较熟悉了
但是也要看个人的能力和机遇,熟悉数仓和开发是基础、与上下游打好交道做好交付是进阶、能够支撑数据团队进行数据交付做数据架构师、解决关键问题是数据技术岗的顶尖管理者、突破不了自己的就只能原地踏步或者退步
全部评论
大佬你好,我现在在一个茶饮品牌实习,虽然title是数据开发实习生,但是不在技术组里,所以在组里没有接触到数仓的业务。mt给我的任务我基本上用sql和python就做完了。以前一直想走数分,但是现在在想有这段实习的话是不是有可能往数仓/数开走?本专业是大数据管理,下半年秋招,自学一下数仓/数开能行得通吗?
1 回复 分享
发布于 02-14 17:40 四川

相关推荐

不愿透露姓名的神秘牛友
11-30 22:52
蚂蚁集团 数据开发 26*16 本科985
点赞 评论 收藏
分享
12-07 08:10
门头沟学院 Java
1.实习介绍2. 三个微服务 A/B/C,它们分别操作不同数据库和 Redis,要求最终一致但要尽量“准实时”。某次网络抖动导致 A 提交成功、B 超时、C 回滚了。在这种限制下,你怎么保证最后状态达成一致?3. 如果在一个跨IDC(双活)的系统里,必须保证强一致性,但业务方要求写延迟 < 5ms,怎么实现?为什么4.如果现在要对一个百亿级大表做online DDL 并且不能影响线上读写,你会用什么方案5.MySQL主从复制延迟30秒后主库挂了,从库又丢了binlog的最后10秒。业务方要求你做到“最终数据一致”,但不允许回滚用户侧可见到的状态。你怎么做?6. 如果MQ在多分区、多消费者下防止出现乱序、重复消费这些情况,有哪些措施7. 你觉得“真正的 Exactly Once”在分布式系统中是存在的还是不存在的?8.如果订单查询链路要调用8个服务,每个服务都要查一次 Redis,你怎么把这个链路优化到至少 50%?9.了解k8s么10. 线上一个 K8s 集群节点资源充分,但 Pod 一直 Pending,你要怎么一步步推断可能的原因13.有一个 key 对应的 value 是一个json,结构,json,当中有好几个子任务,这些子任务如果对 key 进行修改的话,会不会存在线程安全的问题?如何解决?如果是多个节点的情况,应该怎么加锁14. 假如有某个游戏区的战斗力排行和我自己的战斗力的排行在哪个位置上,我应该在哪个排名,比如1.按成绩来说前100名的分数是多少,2.自己的排名大概在什么位置,如果流量特别大变动特别快,这个怎么设计,要考虑什么高可用,qps,怎么去设计15.现在有这样的一个问题,我现在有1000个文件,然后每个文件有1000。有1000万行,然后每行一个数字无序,然后数字。数字的范围是从零到100亿。如何快速找到所有数据的中位数16.方法一那个对临时文件这个处理操作是类似于堆的操作吗?还是这样操作就是具体的操作的一个逻辑大概是怎么样的17.手撕:三数之和为0给你一个整数数组nums,判断是否存在三元组[nums[i]nums[j],nums[k]]满足i!=j、i!=k且j!=k,同时满足nums[i]+nums[j]+nums[k] ==0 请你返回所有和为0且不重复的三元组
查看14道真题和解析
点赞 评论 收藏
分享
11-25 21:13
已编辑
门头沟学院 Java
查看17道真题和解析
点赞 评论 收藏
分享
评论
1
4
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务