mysqldump导出数据时,如何调整每个insert语句的values值的数量?

当我们对一个包含1千万行记录的表history执行导出时,假设只用的备份语句如下:

  #mysqldump -uroot -p'123456'  --set-gtid-purged=OFF tdb history>history.sql

当我们执行表的恢复时,执行如下语句:

mysql> source history.sql

。。。

Query OK, 0 rows affected (0.01 sec)

Query OK, 27893 rows affected (1.78 sec)
Records: 27893 Duplicates: 0 Warnings: 0

Query OK, 27961 rows affected (0.46 sec)
Records: 27961 Duplicates: 0 Warnings: 0

。。

我们发现,每次只能插入2.7万条左右的记录,通过修改MySQL variables参数,可能会更改插入效率。但每次insert的值无法改变。后来研究备份文件内容发现,

每个insert语句后面的values值大约就在2.7万左右。不是一条insert语句把所有values都插入的。那如果我想更改mysqldump导出时每个insert语句的values值的数量,该如何操作呢?

方法如下:

  # mysqldump -uroot -p'123456' --net-buffer-length=2046528 --set-gtid-purged=OFF tdb history>history.sql

通过修改--net-buffer-length的值来实现。默认值为1046528。而mysqld中该参数的默认值为16384。

修改后,我发现每个insert语句的values值,可以高达5.4万左右。

问题:是不是这个值调的越高越好呢?

经过测试发现:

1、调高后,备份速度明显快很多。

2、但恢复数据时,由于需要对表进行加锁,所以加锁时间也会边长。

这个要权衡利弊进行设置。

参考文档:

1、极客时间《MySQL实战45讲》:41 如何快速复制一张表?

点赞
收藏

评论区

加载中...

相关推荐

MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1

文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s

Oracle 分组与拼接字符串同时使用

SELECTT.,ROWNUMIDFROM(SELECTT.EMPLID,T.NAME,T.BU,T.REALDEPART,T.FORMATDATE,SUM(T.S0)S0,MAX(UPDATETIME)CREATETIME,LISTAGG(TOCHAR(

MySQL部分从库上面因为大量的临时表tmp_table造成慢查询

背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_

皕杰报表之UUID

​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为

2020年前端实用代码段,为你的工作保驾护航

有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )

Python3:sqlalchemy对mysql数据库操作,非sql语句

Python3:sqlalchemy对mysql数据库操作,非sql语句python3authorlizmdatetime2018020110:00:00coding:utf8'''