我导出一个mongodb的表为json文件，160g，倒了两天怎么才导出了16g，有什么快速的办法拿到这些数据么？json快还是csv快，或者备份数据库快？
用的命令为类似下面的：
mongoexport -d dbname -c collectionname -o file --type json/csv -f field
mongodb数据导出太慢，求快速导出数据的办法
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
2条回答 默认 最新
-
关注可以采用分布式的方法
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2022-08-05 21:31回答 2 已采纳 已解决，根本不是用户权限问题，换用mac或者linux操作系统，相同命令。如果没其它操作系统去官网下载MongDB Compass，GUI工具。
- 2018-11-07 11:59回答 2 已采纳 https://www.cnblogs.com/zhengchunhao/p/5684166.html
- 2021-08-23 16:00回答 1 已采纳 你直接查询了MongoDB表的所有数据肯定慢。你可以将MongoDB的数据先查询保存为10-50万记录一个csv文件，再用pandas去加载这些csv，加载过程就会很快。
- 2020-10-12 18:17肖永威的博客 对于处理读取大批量MongoDB数据的需求，一般采用通过游标分批读取数据，逐批按需求处理数据（数据治理）方案，这样过程思维清晰，缺点是大数据量时速度较慢，而且需要调优游标批量处理量（batch_size），例如我处理...
- 2017-04-21 07:37回答 2 已采纳 之前看见的文章里也遇见你这个问题，可以参考一下 http://forum.foxera.com/mongodb/topic/967/mongodb%E5%A6%82%E4%BD%95%E5%B0%8
- 2016-01-20 14:01回答 4 已采纳 不能把驱动换成2.0.因为项目是net framework 4.0的。再加序列化速是多少？这样操作很头痛。到时我要查找范围行和列的数据就无法实现了。
- 2015-12-08 03:00回答 1 已采纳 这个错误给的信息太少了
- 2020-12-02 15:16weixin_39844942的博客 1、背景介绍：最近一直被OOM问题缠绕，原因是表单下载功能访问量比较大，数据量相当多，表单数据存储在mongodb，数据总量2亿多，每个实例总内存限制1.5G左右，线上部署了5个实例，但是最大承受时间也不过3天，于是...
- 2021-04-02 14:25回答 2 已采纳 写一个模板 PUT _template/usertestdb{ "index_patterns":["te*"], "order":1, "settings":{ "index":{
- 2023-01-07 08:59回答 5 已采纳 方法一：使用$unwind将数组打散,获取结果集后用$match筛选符合条件的数据，最后使用$group进行聚合获取最终结果集。方法二：使用$match过滤符合条件的根文档结果集，然后使用$proje
- 2021-01-08 16:54回答 2 已采纳 参考下：https://blog.csdn.net/yaomingyang/article/details/78791453 应该会返回一个匹配数量和更新数量两个字段
- 2020-07-14 16:40「已注销」的博客 目录前言环境搭建Hadoop分布式平台环境前提准备安装VMware和三台centoos起步...导出数据存储数据数据分析思路分析具体要求分析“数据分析”、“大数据开发工程师”、“数据采集”等岗位的平均工资、最高工资、最低工资...
- 2023-01-08 10:30fengye_ls2022的博客 一次MongoDB两亿条数据导出
- 2022-11-07 15:41ASDWYang的博客 大数据第一个项目笔记整理
- 2020-08-04 16:59不耻下问 方得天下的博客 刚开始以为这个很简单，但是做的时候却遇到很多坑。...没办法，只能借助其他工具，因为我的导出数据是日志数据，即它不怎么变化，所以我使用了mongodb去存储我的数据。OK,数据拿取很快了。 **第二个坑：内存泄漏** 这
- 没有解决我的问题, 去提问
问题事件
已采纳回答
9月16日
悬赏问题
- ¥15 宇视监控服务器无法登录
- ¥15 PADS Logic 原理图
- ¥15 PADS Logic 图标
- ¥15 电脑和power bi环境都是英文如何将日期层次结构转换成英文
- ¥15 DruidDataSource一直closing
- ¥20 气象站点数据求取中~
- ¥15 如何获取APP内弹出的网址链接
- ¥15 wifi 图标不见了 不知道怎么办 上不了网 变成小地球了
- ¥50 STM32单片机传感器读取错误
- ¥50 power BI 从Mysql服务器导入数据，但连接进去后显示表无数据