数亿级别数据 随意输入一个关键字在最短时间内检索出来,如何处理?(可从三方面考虑1 数据结构,2 算法,3数据库)面试被问到这个,没大数据处理的经验,不知如何作答,各位有何思路?
5条回答 默认 最新
- 冰冻火山 2017-10-18 06:58关注
只能用分布式了,10亿数据,100台机器,每台机器处理一部分数据,再另上时时输出。
1,单机处理不可能满足最短时间的要求。
2,如果用分布式处理,那么每台机器的处理数据,如何划分,是关键。解决 无用评论 打赏 举报
悬赏问题
- ¥15 如何在scanpy上做差异基因和通路富集?
- ¥20 关于#硬件工程#的问题,请各位专家解答!
- ¥15 关于#matlab#的问题:期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707,使系统具有较小的超调量
- ¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
- ¥30 截图中的mathematics程序转换成matlab
- ¥15 动力学代码报错,维度不匹配
- ¥15 Power query添加列问题
- ¥50 Kubernetes&Fission&Eleasticsearch
- ¥15 報錯:Person is not mapped,如何解決?
- ¥15 c++头文件不能识别CDialog