for(int i= 0 i<10000000;++i) //1千万次循环
{
Company company = new company();
c.setName("name"+i);
c.setAddress("address"+i);
companyList.add(c):
if(i!=0 && i%10000==0)//每1万次批量插入一次
{
mongoTemplate.inserAll(companyList); //controller层调用dao层的mongoTemplate的insertAll方法
}
}
程序跑完耗时556s ,9分多钟。
开发中第一次遇到这么大量的测试,大神有快速导入的方法吗?求告知,求分享
spring-data-mongodb 如何快速向mongodb快速插入千万条记录?
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
1条回答 默认 最新
- oyljerry 2017-11-14 09:03关注
你已经用了批处理方式了,这么大数据量,估计没有特别好的办法
但是看看mongodb是不是可以通过分片等集群方式,然后把数据根据分片规则插入不同的节点,来提升性能解决 无用评论 打赏 举报