mysql提高insert into 插入速度的方法

71 阅读 0 评论 47 点赞

我是靠谱客的博主平常心情，最近开发中收集的这篇文章主要介绍mysql提高insert into 插入速度的方法，觉得挺不错的，现在分享给大家，希望可以做个参考。

概述

插入记录时，影响插入速度的主要是索引、唯一性校验、一次插入记录条数等。根据这些情况，可以分别进行优化，本节将介绍优化插入记录速度的几种方法。

Mysql在V5.1之前默认存储引擎是MyISAM；在此之后默认存储引擎是InnoDB

查看默认存储引擎

show variables like '%engine%';

一.对于MyISAM引擎表常见的优化方法如下：
    1.禁用索引。对于非空表插入记录时，MySQL会根据表的索引对插入记录建立索引。如果插入大量数据，建立索引会降低插入记录的速度。为了解决这种情况可以在插入记录之前禁用索引，数据插入完毕后在开启索引。禁用索引的语句为： ALTER TABLE tb_name DISABLE KEYS; 重新开启索引的语句为： ALTER TABLE table_name ENABLE KEYS; 对于空表批量导入数据，则不需要进行此操作，因为MyISAM引擎的表是在导入数据之后才建立索引的。
    2.禁用唯一性检查：数据插入时，MySQL会对插入的记录进行唯一性校验。这种唯一性校验也会降低插入记录的速度。为了降低这种情况对查询速度的影响，可以在插入记录之前禁用唯一性检查，等到记录插入完毕之后再开启。禁用唯一性检查的语句为： SET UNIQUE_CHECKS=0; 开启唯一性检查的语句为： SET UNIQUE_CHECKS=1;
    3.使用批量插入。使用一条INSERT语句插入多条记录。如 INSERT INTO table_name VALUES(....),(....),(....)
    4.使用LOAD DATA INFILE批量导入当需要批量导入数据时，使用LOAD DATA INFILE语句导入数据的速度比INSERT语句快。
二.对于InnoDB引擎的表，常见的优化方法如下：
    1.禁用唯一性检查。同MyISAM引擎相同，通过 SET UNIQUE_CHECKS=0; 导入数据之后将该值置1。
    2.禁用外键检查。插入数据之前执行禁止对外键的查询，数据插入完成之后再恢复对外键的检查。禁用外键检查语句为： SET FOREIGN_KEY_CHECKS=0; 恢复对外键的检查语句为： SET FOREIGN_KEY_CHECKS=1;
    3.禁止自动提交。插入数据之前禁止事务的自动提交，数据导入完成之后，执行恢复自动提交操作。禁止自动提交语句为： SET AUTOCOMMIT=0; 恢复自动提交只需将该值置1。

当mysql大批量插入数据的时候就会变的非常慢, mysql提高insert into 插入速度的方法有三种:

第一种插入提速方法:

如果数据库中的数据已经很多(几百万条), 那么可以加大mysql配置中的 bulk_insert_buffer_size，这个参数默认为8M这个参数仅作用于使用 MyISAM存储引擎，用来缓存批量插入数据的时候临时缓存写入数据。mysql会使用这个内存区域来缓存批量结构的数据以帮助批量写入数据文件。
例如将该buffer大小设置为100M。
set global bulk_insert_buffer_size = 1024*1024*100;