zs007wow 2015-02-04 06:32
浏览 2087

mongodb 分片集群,大批量数据插入效率问题

mongodb 分片集群,大批量数据插入效率问题:
1个config、1个mongos、2个mongod shard,现有2台同配置的机器
(1)当2个shard在同一台机器时候,无论哪一台,插入效率在1w每秒左右;
当数据量达到1.5亿左右的时候,会出现flushing nmaps took xxxx秒 to xxx files 的日志信息,过几十秒就来一次,很卡。
(2)当shard分布在2台机器时候,插入效率只有1500-2000条每秒,每条数据约800字节

请问:1 数据量越大,是不是插入效率会下降,那个flushing查文档说是说内存数据写入到硬盘,为啥一开始不会出现这样的问题?
2 多台机器的网络架构需要注意什么?或者说 可能是什么其他问题造成效率差距这么大?
新手没有币请见谅

  • 写回答

0条回答 默认 最新

      报告相同问题?

      相关推荐 更多相似问题

      悬赏问题

      • ¥15 我想用matlab处理spm8和vbm8的数据分析,用于分析nii文件各种脑区的图像,但是在第一步使用estimate and write中就出错,如何解决?
      • ¥15 能否给一个SOCKET通转USB通信的安卓程序代码
      • ¥15 前端js跨域请求问题
      • ¥15 C++SMTP服务器
      • ¥15 为什么52单片机测温实物LCD不显示数值?(c语言)
      • ¥30 《红色警戒2》最新mod《泰矿危机2》修改敌方单位阵营易语言
      • ¥15 C语言频闪问题与时间显示
      • ¥15 利用funguild进行大型真菌生态型划分
      • ¥20 急!希望找到这个程序的作者help
      • ¥20 windows系统文件缺失去