mongo库备份数据远大于原数据 20C

使用mongodump -h 127.0.0.1 -o /home/backup对mongo库进行逻辑备份,结果备份数据远大于原数据,

比如:show dbs 显示 analyse库大小为4.85G
导出后的备份数据为30G

请问该如何解决

1个回答

你可以mongodump的时候用--gzip等压缩了一下

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
MSSQL数据转存Mongo数据
最近会用到数据库数据之间的转换给大家分享一下MSSql数据转Mongo数据, 用代码直接转 首先你需要安装MSSQLserver2012 安装mongo 代码: var MongoClient = require('mongodb').MongoClient;//引包 var url = "mongodb://localhost:27017/GWPIS";//定义mongo的网址   v...
mongo备份
备份操作会增加系统负担:备份需将所有数据读取到内存中。因此,应对副本集的非主节点进行备份,或者在空闲时段对独立服务器备份。 文件系统快照 最简单。 条件:文件系统支持快照技术;运行mongod时必须开启日志系统 -journal。 恢复时,确保mongod没有在运行。从快照恢复数据的确切命令取决于文件系统。 可以对正在运行的系统生成快照,mongod在启动时会对日志(jour...
mongo 备份
1 mongoexport (数据导出 ) 作为 DBA,经常会碰到导入导出数据的需求,下面就介绍实用工具 mongoexport 和 mongoimport 的使用方法。 1.1 常用导出方法 mongoexport -d my_mongodb -c user -o user.dat 参数说明 : -d 指明使用的库, 本例中为” my_mongodb” -c 指明要导出的表, ...
Mongo备份
Mongo备份 标签(空格分隔): Mongo **sudo mongodump -h localhost:27017 -d raw_data -o /mongo_data * -h 你的mongo地址 * -d 要备份的数据库名字 * -o 你要备份的路径(我用的是linux)...
R调用mongo数据
R调用mongo数据从mongo数据库获取数据。由于为非结构化数据,数据存储在R上为list类型,可以保存为rdata数据类型。在保证数据不丢失的情况下,其数据存储量呈指数减少。原始数据大小 4G左右install.packages("mongolite") library(mongolite) con <- mongo(collection = "journey",db = "user", url
导入大批量数据到mongo
本地导入大批量数据 mongobooster导入数据 mongobooster是连接mongo比较好用的客户端,相对于robomongo来说,mongobooster可以更好的展示数据,也能导入导出数据,非常简单方便。 当我们导入小批量的数据的时候,使用工具的导入导出没有问题,但是当我们导入大批量的数据的时候,使用工具导入程序就会瞬间卡死,所以导入大批量数据,使用命令进行导入 命令...
导入mongo数据
mongorestore -h 127.0.0.1:57087 -d test_gather 你的路径
ruby 遍历mongo数据
next_played_videos = @channel.videos.active.where(:begin_time.gt => begin_time).asc(:begin_time) next_played_videos.each do |video| video.begin_time = begin_time video.end_time = v
mongo修改数据
[img=https://img-bbs.csdn.net/upload/201404/03/1396514124_726499.png][/img]rn我想修改数组aids中asex字段的值rn在rockmongo中rnrn '$set': rn "aids.$.asex":5rn rnrn搞不懂老是修改不了?
导出mongo中的数据
#-*- encoding:utf-8 -*- ######################################### ###用于导出库 from bson.json_util import loads,dumps from pymongo import MongoClient from config import config as C connect = MongoClient(C
上传Excel数据到mongo
Excel第一行为数据列的 key, 第二行为数据列的数据类型Controller@RequestMapping(value=&quot;/data/import&quot;, method=RequestMethod.POST) public Message&amp;lt;String&amp;gt; importOpenStrategyData( @RequestParam(value=&quot;collectionNa...
mongo数据参考博客
学习地址一:http://blog.csdn.net/wangpeng047/article/details/7705588
mongo 的crud操作&&mongo的数据聚合
插入insert插入单个文档db.getCollection('users').insert({"name":"sasa"})插入多个文档db.getCollection('users').insert([{"name":"sasa"},{"sdsd":"sasa"}])查询操作querydb.collection.find( , ) 用于查找满足过滤条件的Document (投影)用于指定被
sqlyog备份数据和导入备份数据
使用sqlyog备份数据 Database -&amp;gt; Backup/Export  -&amp;gt; Backup Database As SQL Dump 根据自己实际情况,看需要 导出表结构或者仅仅只需要表数据,又或者表结构和数据都需要。选择完成,点击“Export”即可。 使用sqlyog导入备份数据 Database -&amp;gt; Import -&amp;gt; Restore Fro...
备份数据
将一Edit显示的路径中的文件,备份至另一Edit显示的路径处?最好有代码。
数据的备份
目录 1.导出数据库 2.导入数据库 数据库的导入和导出(不在mysql内部执行,在cdm内执行) 数据库的导入 mysqldump mysqldump -u root -p 数据库名 表名 &gt;文件名.sql 数据库的导出 mysql mysql -u root -p 数据库名 &lt;文件名.sql 1.导出数据库 mysqldump -u...
聚宽数据与mongo数据核对
代码: import sys import datetime import pymongo import pprint import pandas as pd import jqdatasdk as jqsdk # 聚宽数据 jqsdk.auth(' ', ' ') # 申请聚宽数据账号 df1 = jqsdk.get_price("002694.XSHE", star...
mongo数据无法查询尾页数据!
用的是C# rn今天用mongo查数据的时候,查询不到尾页 数据,数据大概有100W+条,当跳转到尾页或者很后面的页数时,数据没有返回.rn[code=csharp]rnvar _repository=new MongoClient(ConnectionUrl).GetServer().GetDatabase("Test").GetCollection(CollectionName).rnMongoCursor cursor = _repository.Find(Query).SetSortOrder(sort).SetLimit(PAGE).SetSkip(skip);rn[/code]rn大概就是这种样子,查询前面页数的时候反应慢了点,但是可以查询出来,但是查询尾页或者很后面的页数时,没有查询数据返回,看了下mongo的日志rn[code=text]rn2018-05-03T18:43:50.898+0800 I COMMAND [conn5] query fdms.egslog query: $query: OwnerId: "5aea7ddcf7f1253368dbccbf" , $orderby: CreateTime: -1 planSummary: COLLSCAN, COLLSCAN cursorid:35886059723 ntoreturn:100 ntoskip:600 keysExamined:0 docsExamined:1084135 hasSortStage:1 keyUpdates:0 writeConflicts:0 numYields:8475 nreturned:100 reslen:19220 locks: Global: acquireCount: r: 16952 , Database: acquireCount: r: 8476 , Collection: acquireCount: r: 8476 1601msrnrn2018-05-03T18:44:20.057+0800 E QUERY [conn5] Plan executor error during find: FAILURE, stats: stage: "SKIP", nReturned: 0, executionTimeMillisEstimate: 460, works: 160802, advanced: 0, needTime: 160801, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, skipAmount: 1084100, inputStage: stage: "ENSURE_SORTED", nReturned: 0, executionTimeMillisEstimate: 460, works: 160802, advanced: 0, needTime: 160801, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, nDropped: 0, inputStage: stage: "OR", nReturned: 0, executionTimeMillisEstimate: 460, works: 160802, advanced: 0, needTime: 160801, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, dupsTested: 0, dupsDropped: 0, locsForgotten: 0, inputStages: [ stage: "SORT", nReturned: 0, executionTimeMillisEstimate: 460, works: 160802, advanced: 0, needTime: 160801, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, sortPattern: CreateTime: -1 , memUsage: 33554545, memLimit: 33554432, limitAmount: 1084200, inputStage: stage: "SORT_KEY_GENERATOR", nReturned: 0, executionTimeMillisEstimate: 200, works: 160801, advanced: 0, needTime: 2, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, inputStage: stage: "COLLSCAN", filter: OwnerId: $eq: "5aea7ddcf7f1253368dbccbf" , nReturned: 160799, executionTimeMillisEstimate: 70, works: 160800, advanced: 160799, needTime: 1, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, direction: "forward", docsExamined: 160799 , stage: "SORT", nReturned: 0, executionTimeMillisEstimate: 0, works: 0, advanced: 0, needTime: 0, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, sortPattern: CreateTime: -1 , memUsage: 0, memLimit: 33554432, inputStage: stage: "SORT_KEY_GENERATOR", nReturned: 0, executionTimeMillisEstimate: 0, works: 0, advanced: 0, needTime: 0, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, inputStage: stage: "COLLSCAN", filter: OwnerId: $eq: "5aea7ddcf7f1253368dbccbf" , nReturned: 0, executionTimeMillisEstimate: 0, works: 0, advanced: 0, needTime: 0, needYield: 0, saveState: 1256, restoreState: 1256, isEOF: 0, invalidates: 0, direction: "forward", docsExamined: 0 ] rnrn2018-05-03T18:44:20.114+0800 I QUERY [conn5] assertion 17144 Executor error: OperationFailed: Sort operation used more than the maximum 33554432 bytes of RAM. Add an index, or specify a smaller limit. ns:fdms.egslog query: $query: OwnerId: "5aea7ddcf7f1253368dbccbf" , $orderby: CreateTime: -1 rnrn2018-05-03T18:44:20.114+0800 I QUERY [conn5] ntoskip:1084100 ntoreturn:100rn[/code]rn上述可以忽略, 主要是 ——————Plan executor error during find:——————rn然后就没有数据返回了,求解为何会查不到数据!!!!!!!
如何全备份一个oracle 数据 库
如题
如何仅备份库中表的数据
数据不多,表很多。rn我现在只需要表里的数据,不需要日志,系统信息等等,rn如何方便快捷的导出指定库中表的数据,不要msdb等系统信息。谢谢
Mongodb之备份数据与数据的导入导出
备份数据 -d后面加备份哪个数据库 -o后面加备份到哪个地址下面 mongodump -h localhost:27017 -d itcase -o d://buba db.help()这个函数可以看到针对数据库的所有的操作 调用db.dropDatabase()这个方法就是删除当前数据库,如果删除别的数据库就传入参数 -d 后面加恢复数据到哪个数据库,-director...
mongo 批量删除符合条件的数据(java代码)
//七天前的数据 Bson createTimeBson = Filters.lte("creatTime",  DateTimeUtils.addSomeDay(new Date(), -7)); //in 条件 Bson parentPushTypeBson = Filters.in("parentPushType", "03","04"); //用and链接 Bson bs
mongo备份与还原
mongo备份 mongoexport -h ip:port -u username(帐号) -p password(密码) -d database -c db(数据库) -o form.json mongo还原 mongoimport -h ip:port -u username(帐号) -p password(密码) -d database -c db(数据库)–file form.json...
mongo备份导出
#导出单张表 mongodump -h 92.12.76.13 -u admin -p 'System@!2018' -d dzswjdb -c zlpzxxVO -o /mongodb_gsback_1 --gzip --authenticationDatabase admin; #导出库 mongodump -h 192.168.51.38 -u admin -p 1234...
mongo 备份 还原
备份: [color=red] 命令介绍:[/color] &gt;mongodump -h dbhost -d dbname -o dbdirectory -h:MongDB所在服务器地址,例如:127.0.0.1,当然也可以指定端口号:127.0.0.1:27017 -d:需要备份的数据库实例,例如:test -o:备份的数据存放位置,例如:c:\data\dump,...
mongo插入long类型数据
mongo如果插入一个很大的整数的话,默认时double类型的。要想插入long类型,则在需要插入的数据前面加上NumberLong()这个函数就可以了。如下代码 db.catalog.insert({ _id:NumberLong(125894171859877899), title:"聊天室", portrait:"www.lanqi.com", create_time:Nu
Mongo 备份和还原
备份 mongodump -h 127.0.0.1 -d data -u=admin -p=123456 -o /data/dump/ --authenticationDatabase app -d 指定要备份的库 -u 帐号 -p 密码 /data/dump/ 备份存放路径 –authenticationDatabase 认证库 还原 mongorestore -h 127.0.0.1 -...
从mongo得到数据分页
// 分页开始         $count = 0;         $comment = 0;         foreach ($cursor as $doc) {             $dmk = array();             foreach ($doc['data'] as $subDoc) {                 if ($comment >
mongo数据转存(3.0版本)
首先,我们用最愚蠢的方式取出数据:mongodump --db {dbname} --out {dirname}然后,我们打包一下方便传输: tar -cvf {FileName}.tar {dirname}接下来呢?我们用sftp传输一下:get {FileName}.tar .拆包:tar xvf {FileName}.tar最后我们回复一下数据:mongorestore --dir {dirn
使用navicat for mongo同步数据
使用navicat for mongo同步数据 作为一个初次接触mongoDB的小白,当老大说你把两个mongo的数据同步一下。。。我的表情基本是o_0?研究一手navicat for mongo的数据同步,然鹅 好像什么都没有。。。试试直接从数据库导出脚本 导出如下的js文件 看样子好像没什么问题。。。在另一个数据库选择运行脚本 扑街。。。 检查一下错误。。。竟然不让我加事务。。。删掉...
mongo数据导入到hive里面
一数据库地址:10.10.202.25 1.数据库spider: (1)特定源爬取表articles_us: (2)搜索引擎查询表search_news: 2.数据库es_news_ext: (1)特定源爬取表,搜索引擎查询表,内容解析表articles_us 二、mongo数据库地址:10.10.203.135 1.wind新闻数据库wind: (1)
mongo查找数据的一些方法
CRUD C: Create Operations, 创建 R: Read Operations, 读取 U: Update Operations, 更新 D: Delete Operations, 删除 mongo数据库至上而下是:Database–>Collections–>Documents。我在这里分别理解成数据库、集合、记录。 这里直接用官方给的数据来操作。假设以下数据放在了f
数据(库)
drafting
水晶报表数据原的问题!!
我希望在数据录入界面录入数据后,在数据进入数据库之前直接调用水晶报表打印特定报表。rn但我在网上找到的资料都是关于水晶报表邦定DataSet的例子,那不生成DataSet,水晶报表可以取得我录入的数据并打印报表吗?
怎么设置数据原?
我在写一个数据库的时候,用的是jdbc,当然需要设定数据源.在98系统中可以在控制面板的odbc源中设定,但是我在window Xp中却不知道怎么设定?rn 请大家指教我一下.rn
数据原设置问题
我现在设置数据源,是在控制面版中的数据源管理器中手工设置,操作起来非常麻烦,特别是当程序包让客户安装的时候,许多人并不了解如何设置.rnrn现想让程序启动时,自动检测并安装数据源,如何才能做到?(具体怎么做?)rnrn谢谢各位!
添加分页原数据
<img src="https://img-bss.csdn.net/201903040517183350.jpg" alt="" /><img src="https://img-bss.csdn.net/201903040517279072.jpg" alt="" /><img src="https://img-bss.csdn.net/201903040517354656.jpg" alt="" /><img src="https://img-bss.csdn.net/201903040517433920.jpg" alt="" /><img src="https://img-bss.csdn.net/201903040517524565.jpg" alt="" />
从原数据
一个文件因为没找到源代码,显示从原数据,而且不可更改,另外我的源代码改了也没用。怎么办啊?
数据原c3p0配置
数据原 c3p0 配置
报表的数据原问题!!
如何在VB中动态改变水晶报表的数据原的问题 如果不用dsn 直接指定数据库文件rn怎样写呢,请举例说明:谢谢rn
相关热词 c# stream 复制 android c# c#监测窗口句柄 c# md5 引用 c# 判断tabtip 自己写个浏览器程序c# c# 字符串变成整数数组 c#语言编程写出一个方法 c# 转盘抽奖 c#选中treeview