求解bilibili后台开发设计题———数据读取系统的设计

有200亿条数据，每条数据的大小在1k-1M不等，每条数据有一个唯一的u_int64的id，请设计一个数据读取系统，能根据id获取数据。

全部评论
Mongodb存数据，建id索引，用Redis缓存
点赞 回复 分享
发布于 2017-09-15 16:59
可以用hive,表的分区利用 唯一 id 的划分区域进行划分，或者是在内存中储存 id 分区的范围，通过判定分区进行查询，200E数据 每条 1K-1M，应该是用分布式了吧？  
点赞 回复 分享
发布于 2017-09-15 16:54
提供一个思路：对id进行hash或者是对id范围进行分区分库，然后根据id获取，查询还是很慢的话那么可以考虑集群。
点赞 回复 分享
发布于 2017-09-15 16:50
这种题目不是很开放么- -？
点赞 回复 分享
发布于 2017-09-15 16:50
刚好就这题没做23333，时间不够，还是自己太渣了
点赞 回复 分享
发布于 2017-09-15 16:45

相关推荐

02-02 10:42
江苏师范大学 运营
点赞 评论 收藏
分享
01-14 16:23
广州商学院 Java
可以去冲一下大厂吗
双非后端失败第N人：如果准备好了可以直接投字节，字节是最不看学历的，只要想面，大概率都能给你约面。
双非有机会进大厂吗
点赞 评论 收藏
分享
头像
02-05 18:33
百度_高级研发工程师
有了AI之后，程序员能不能干到65岁？
事起于肘腋之间，闻听那个猝死的程序员，以及同事讲的一个35岁的老开发，车贷房贷传宗接代，200多斤，头发白了一半，天天卷，随时可能驾鹤西去。 我不禁想到一个问题，AI的出现，到底是加剧了35岁危机，还是减缓了35岁危机？程序员到底能干到多少岁？ 在进入这个问题之间，我先说一个长远性的见解，每次时代变革，都是普通人的机会，不论你深处何地，不论你多大年龄，所以我觉得对于大龄程序员，这同样是个机会，至于能不能把握住，就看自己了。一、为什么会有35岁危机 能力与价值不符：有些人是10年经验，有些人是一年经验用了十年，所以在技术迭代的背景下，跟不上发展，自然年龄大了就淘汰了。 身体与精力下降：35岁，干...
AI求职实录
点赞 评论 收藏
分享
评论
点赞
9
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 在大厂上班是一种什么样的体验 #
13196次浏览 176人参与
# 机械人避雷的岗位/公司 #
44489次浏览 314人参与
# 程序员找工作至少要刷多少题？ #
22102次浏览 282人参与
# 工作前VS工作后，你的心态变化 #
38278次浏览 266人参与
# 论秋招对个人心气的改变 #
14385次浏览 197人参与
# 为了减少AI幻觉，你注入过哪些设定？ #
6672次浏览 190人参与
# 牛客AI体验站 #
8463次浏览 217人参与
# 你的mentor是什么样的人？ #
51330次浏览 724人参与
# 你现在会用到哪些AI技能？ #
24713次浏览 137人参与
# 找实习多的是你不知道的事 #
1788599次浏览 20670人参与
# 我现在比当时_，你想录用我吗 #
9763次浏览 133人参与
# 12306一秒售罄，你抢到回家的票了吗？ #
2426次浏览 52人参与
# 应届生进小公司有什么影响吗 #
118607次浏览 1161人参与
# 一张图晒一下你的AI员工 #
6031次浏览 131人参与
# 哪一瞬间让你觉得工作好累 #
75643次浏览 431人参与
# AI Coding的使用心得 #
5653次浏览 117人参与
# 父母对你找工作是助力还是阻力？ #
38360次浏览 387人参与
# 刚入职的你踩过哪些坑 #
7933次浏览 140人参与
# 我和mentor的爱恨情仇 #
106441次浏览 951人参与
# 25年找工作是什么难度？ #
53644次浏览 338人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务