MySQL插入数据很慢优化

show variables 查看数据库配置

找到bulk_insert_buffer_size参数
加大mysql配置中的bulk_insert_buffer_size，这个参数默认为8M

SET bulk_insert_buffer_size = 100 * 1024 * 1024; #100M
#1024 * 1024=1m

修改该条记录有助于千万级别数据批量插入。

self.cursor.executemany(sql_p, ry)
#数据库批量插入：sql_p为sql语句，ry为数据数组里放多个元组，具体可查询executemany函数使用方法

MySQL插入数据很慢优化相关推荐

MySQL插入数据很慢优化思路
MySQL插入数据很慢优化思路解决方法与思路解决方法与思路插入数据量非常大的场景加大mysql配置中的bulk_insert_buffer_size,这个参数默认为8M bulk_insert ...
Mysql批量插入数据问题解决和优化
Mysql批量插入数据问题解决和优化一.问题描述项目中mysql批量插入大概50000左右数据,使用事务和批量,但是速度依旧很慢,大约60s左右,迫切希望改进这个问题. 二.问题原因尽管是批量a ...
mysql插入数据与删除重复记录的几个例子(收藏)
mysql插入数据与删除重复记录的几个例子 12-26shell脚本实现mysql数据的批量插入 12-26mysql循环语句插入数据的例子 12-26mysql批量插入数据(insert into ...
mysql c接口返回自增id_详解mysql插入数据后返回自增ID的七种方法
引言 mysql 和 oracle 插入的时候有一个很大的区别是: oracle 支持序列做 id: mysql 本身有一个列可以做自增长字段. mysql 在插入一条数据后,如何能获得到这个自增 i ...
java mysql 插入乱码_java向mysql插入数据乱码问题的解决方法
遇到java向mysql插入数据乱码问题,如何解决? MySQL默认编码是latin1 mysql> show variables like 'character%'; +----------- ...
mysql 新增返回主键自增id_详解mysql插入数据后返回自增ID的七种方法
引言 mysql 和 oracle 插入的时候有一个很大的区别是: oracle 支持序列做 id: mysql 本身有一个列可以做自增长字段. mysql 在插入一条数据后,如何能获得到这个自增 i ...
Python3 多线程(连接池)操作MySQL插入数据
1.主要模块 DBUtils : 允许在多线程应用和数据库之间连接的模块套件 Threading : 提供多线程功能 2.创建连接池 PooledDB 基本参数: mincached : 最少的空闲连 ...
七种MYSQL插入数据后返回自增主键ID的方法
我们都知道,mysql中的insert插入之后会有返回值,返回的是影响的行数,也就是说,成功插入一条数据之后返回的是1,失败则返回0.那么,很多时候我们都想要得到最后插入的id值,下面七种方法均可,结 ...
MySQL 插入数据时，中文乱码问题的解决
MySQL 插入数据时,中文乱码问题的解决参考文章: (1)MySQL 插入数据时,中文乱码问题的解决 (2)https://www.cnblogs.com/sunzn/archive/2013/0 ...

MySQL插入数据很慢优化

MySQL插入数据很慢优化相关推荐

最新文章

热门文章