码迷,mamicode.com
首页 > 数据库 > 详细

mongodb千万级写入怎么优化

时间:2019-04-24 13:26:22      阅读:181      评论:0      收藏:0      [点我收藏+]

标签:load   读取   upload   java程序   ODB   数据   pac   导入   stat   

从mysql数据库通过java程序导入单表1300w到mongodb,花了大概50分钟,前1000w条数据中每100w条大概要3分钟,之后的300多w条就差不多每100w条要5到6分钟,之后再从其他的mysql表里面导入数据就会越来越慢,请问可以从那些方面可以优化mongodb的写入操作?
这是我记录的花费时间
技术图片

可以确定的是如果只在mysql里面遍历读取这1300w条数据,花费时间是10分钟左右。

可以生成好文档数据,然后用mongoimport  导入, 速度超快!

 

加大内存,mongodb 的热数据是保存在内存的,内存用完了,开始读写硬盘的数据跟MYSQL就差不多了

 

mongodb千万级写入怎么优化

标签:load   读取   upload   java程序   ODB   数据   pac   导入   stat   

原文地址:https://www.cnblogs.com/ExMan/p/10761784.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!