大数据环境用的是CDH5.11，主要组件是hadoop+zookeeper+hbase+solr+hive，
目前hbase数据量为5亿，用solr查询habse，多条件分页查询很快，
最近提出了下载功能，需要将查询的结果集下载到本地，性能很差，求比较好下载的方案
求助:大数据环境下下载数据的性能问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
2条回答 默认 最新
- 2021-04-19 16:17回答 8 已采纳 第四题 select count(*) from tab where arr_time <>leave_time and (arr_time between 2018-03-01 13
- 2018-11-25 05:13回答 2 已采纳 不考虑运行，仅仅修改编译错误，如下： 如果运行还有问题，请点我回答左上角的采纳和向上的箭头，重新提问，我继续回答。 ``` #include #include #defi
- 回答 1 已采纳 https://www.chinahadoop.cn/page/100
- 2022-01-18 19:38过往记忆的博客 1 什么是数据倾斜数据倾斜即指在大数据计算任务中某个处理任务的进程（通常是一个JVM进程）被分配到的任务量过多，导致任务运行时间超长甚至最终失败，进而导致整个大任务超长时间运行或者失败。外...
- 2020-12-25 07:47回答 2 已采纳 没其他条件下是50%。男女孩出生概率都是50%，不论生多少个每次的概率都是50%，和猜硬币正反面是一样的。这只是理论，但是1000的数量太少了，按统计数量来说没法达到概率平衡的与，用计算机模拟每次都会
- 2015-06-05 06:02回答 2 已采纳 volatile的作用是保证instance取到的值是最新的，在你这个例子中，它是没有什么意义的，你已经加了synchronized了。这个就保证了单例。但其实你直接在getInstance方法上加s
- 2017-05-15 09:58回答 2 已采纳 也就是说每页的头尾会出现这种情况，那就对头尾数据按照你那几列相同的条件到数据库中count一下
- 2020-12-21 14:37weixin_39673742的博客 现在需求是 页面上要显示上万条的文本数据，放到Log组件里面，最开始的做法是 在前台做数据处理，根据获取到得数组数据生成html 文本 (这里生成html文本很小，就一个span + 日志内容，但是数据量很大) 遍历每一个...
- 2019-09-11 23:33回答 1 已采纳 我也遇到过，可能是自己选的maven版本过高，就使用idea自带的吧，用自己的settings.xml就好了
- 2019-06-24 02:14回答 1 已采纳 As commented, your ~/.zshrc should set PATH to reference Go, as seen in the Go wiki: Edit your
- 2020-01-21 23:28回答 1 已采纳 https://zhidao.baidu.com/question/1900176436078090900.html
- 2022-09-08 00:07yitahutu79的博客 早在1971 年，“互联网”一词尚未诞生时，智利总统萨尔瓦多·阿连德就已经下令打造一个由电报机组成的网络系统。这个社会主义实验产物，旨在...它能够实时地将数据从智利的国有工厂传输到位于圣地亚哥的一个运营中心。
- 2015-06-16 08:39回答 2 已采纳 你所谓的按照GBK编码方式读取，关键问题在于你的文件本身是不是按照GBK来写的？如果本身就是GBK的文件，你读取后封装为XML，传输到另一端后，直接写入文件就可以了，不需要还原。 但是如果你原来的文
- 2023-01-09 09:22Jiangxl~的博客 使用分布式集群来处理大数据是当前的主流，将一个大任务拆分成多个子任务分布到多个节点进行处理通常能获得显著的性能提升。因此，只要发现处理能力不足就可以通过增加节点的方式进行扩容，这也是很多拥趸者最朴素的...
- 2020-12-20 05:02weixin_39715290的博客 摘要： 今天多数的大数据计划都是依托Hadoop环境来做结构化和非结构化数据处置，怎样把自己的Hadoop算法快速部署到理论的消费环境当中去，对很多企业的大数据部署也提出了应战。CSDN专访MathWorks中国资深技术专家...
- 2022-03-27 14:13╭⌒若隐_RowYet——大数据的博客 Linux大数据集群篇 4.1 Linux免密登录 4.2 大数据软件安装 4.2.1 安装JDK 及配置环境变量 4.2.2 安装python 4.2.3 安装mysql 4.2.4 安装ftp 4.2.5 安装hadoop（hdfs，mapreduce，yarn） 4.2.6 安装hive 4.2.7 安装...
- 2015-10-20 08:232名名名名名名名名名名名名名名名名名名名的博客 Spark正在占据越来越多的大数据新闻的重要位置，除了性能优异，Spark到底具备了那些特性，让学术界和工业界对其充满了兴趣？同时，Spark还处在快速发展的阶段，开发者和用户不得不解决不稳定和bug，Scala语言也有较...
- 2018-12-27 16:07小迪和夫人的博客 在这里我还是要推荐下我自己建的大数据学习交流qq裙：458345782， 裙 里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 安卓adb backup备份应用数据失败
- ¥15 eclipse运行项目时遇到的问题
- ¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
- ¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
- ¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
- ¥50 成都蓉城足球俱乐部小程序抢票
- ¥15 yolov7训练自己的数据集
- ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)（相关搜索：51单片机|单片机|测试代码）
- ¥15 电力市场出清matlab yalmip kkt 双层优化问题
- ¥30 ros小车路径规划实现不了，如何解决？(操作系统-ubuntu)