zs007wow 2015-02-04 06:32
浏览 2089

mongodb 分片集群,大批量数据插入效率问题

mongodb 分片集群,大批量数据插入效率问题:
1个config、1个mongos、2个mongod shard,现有2台同配置的机器
(1)当2个shard在同一台机器时候,无论哪一台,插入效率在1w每秒左右;
当数据量达到1.5亿左右的时候,会出现flushing nmaps took xxxx秒 to xxx files 的日志信息,过几十秒就来一次,很卡。
(2)当shard分布在2台机器时候,插入效率只有1500-2000条每秒,每条数据约800字节

请问:1 数据量越大,是不是插入效率会下降,那个flushing查文档说是说内存数据写入到硬盘,为啥一开始不会出现这样的问题?
2 多台机器的网络架构需要注意什么?或者说 可能是什么其他问题造成效率差距这么大?
新手没有币请见谅

  • 写回答

0条回答 默认 最新

    报告相同问题?

    悬赏问题

    • ¥15 关于arduino编程toCharArray()函数的使用
    • ¥100 vc++混合CEF采用CLR方式编译报错
    • ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误,如何解决?
    • ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
    • ¥15 c#逐行读取txt文本,但是每一行里面数据之间空格数量不同
    • ¥50 如何openEuler 22.03上安装配置drbd
    • ¥20 ING91680C BLE5.3 芯片怎么实现串口收发数据
    • ¥15 无线连接树莓派,无法执行update,如何解决?(相关搜索:软件下载)
    • ¥15 Windows11, backspace, enter, space键失灵
    • ¥15 cfx离心泵非稳态计算