码迷,mamicode.com
首页 > 数据库 > 详细

解决mysql导入数据文件过慢的问题

时间:2020-01-15 11:42:11      阅读:119      评论:0      收藏:0      [点我收藏+]

标签:group   buffer   wrapper   display   问题   ODB   线程   roo   root   

目前遇到一个问题,mysql使用source命令导入 *.sql 数据文件时,运行的很慢,大概一秒钟插入个一两百条左右的样子,对于大的文件来说这个太慢了,从其他博主那边搜集了一些方案,简单说就是一句话:SET GLOBAL innodb_flush_log_at_trx_commit = 2;

   1.登入mysql

mysql -uroot -p***


2.查看mysql中对于参数 innodb_flush_log_at_trx_commit 的配置

show global variables where variable_name = ‘innodb_flush_log_at_trx_commit‘;

 3.修改

SET GLOBAL innodb_flush_log_at_trx_commit = 2;

修改完成后在次执行相同的文件,200M大约200w+条的数据在1分钟左右。

对于该参数的不同值的说明:

1.innodb_flush_log_at_trx_commit参数为 0
        binlog_group_flush && thd_flush_log_at_trx_commit(NULL) == 0 条件成立,因此直接return了,那么这种情况下log_buffer_flush_to_disk函数不会调用,因此不会做redo刷盘。依赖master线程。
    2.innodb_flush_log_at_trx_commit参数为 1
        !binlog_group_flush|| thd_flush_log_at_trx_commit(NULL) == 1 返回为1即为True,因此调用log_buffer_flush_to_disk(True),因此需要做redo刷盘,也要做sync。
    3.innodb_flush_log_at_trx_commit参数为 2
        !binlog_group_flush|| thd_flush_log_at_trx_commit(NULL) == 1 返回为0即为Flase,因此调用log_buffer_flush_to_disk(Flase),因此需要做redo刷盘,不做sync。依赖OS的刷盘机制。

解决mysql导入数据文件过慢的问题

标签:group   buffer   wrapper   display   问题   ODB   线程   roo   root   

原文地址:https://www.cnblogs.com/rangzhi/p/12195708.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!