如何解决mysql导入sql文件慢、错等问题

 更新时间:2024年09月06日 12:20:44   作者:寅灯  
这篇文章主要介绍了如何解决mysql导入sql文件慢、错等问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教

mysql导入sql文件慢、错等问题

在服务开发过程经常有数据迁移、备份、sql导入需求,而在mysql导入sql文件过程中经常出现慢、错等问题,尤其是通过mysql客户端(比如Nacivat)导入速度更慢。

今天我们选用一个新的导入方案,用MySQL自带的source导入,进行部分自定义操作,速度更快、统一提交;原理:减少网络请求、关闭日志打印、关闭自动提交(开启手动提交),目的是均是为了提高导入效率。

废话少说,现在开始吧。

1、命令行登录数据库

mysql -uroot -p

2、创建数据库

如果数据库还没有创建的话

create database demo;

3、设置参数

#临时关闭二进制日志
set sql_log_bin=off;

#临时关闭事务自动提交
set autocommit=0;

4、使用某个数据库

use demo;

5、手动开启事务

start transaction;

6、执行source导入sql文件

  • 1)linux环境
source .../test.sql
  • 2)win环境
source D:\...\test.sql

或者

source D:/.../test.sql

7、手动提交事务请求

commit;

8、还原最初的配置

#恢复二进制日志
set sql_log_bin=on;
#恢复事务自动提交
set autocommit=1;

理想情况下数据一次性成功导入。

9、注意事项

1)表的最大容量问题 max_allowed_packet

show variables like '%max_allowed_packet%';
select @@max_allowed_packet;

查询:

手动设置

set global max_allowed_packet = 102410141024;

重启mysq才能生效

2) 表的大小写问题

有些业务有大写和小写的表,设置不区分,比如linux环境mysql默认区分;

但是win环境默认不区分;

因此必须保持一致

show variables like "%case%";

结果

原理

  • lower_case_table_names = 0 区分大小写,默认是这种设置
  • lower_case_table_names = 1 不区分大小写

当然,需要在配置文件中修改ini或者cnf 文件里添加。

原理可以参考

3)导入数据时字符集设置问题

报错:mysql数据库导入出错

ERROR:Unknown command ‘\’

核对此数据的字符集和脚本文件里的字符集是否一直,核对后你就会恍然大悟!

这样核对!

除此之外、还有其他类似的设置问题,当然要举一反三!

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • Mysql优化技巧之Limit查询的优化分析

    Mysql优化技巧之Limit查询的优化分析

    这篇文章主要给大家介绍了关于Mysql优化技巧之Limit查询的优化分析,文中通过示例代码介绍的非常详细,对大家学习或者使用Mysql具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧
    2019-07-07
  • mysql存储过程之循环语句(WHILE,REPEAT和LOOP)用法分析

    mysql存储过程之循环语句(WHILE,REPEAT和LOOP)用法分析

    这篇文章主要介绍了mysql存储过程之循环语句(WHILE,REPEAT和LOOP)用法,结合实例形式分析了mysql存储过程循环语句WHILE,REPEAT和LOOP的原理、用法及相关操作注意事项,需要的朋友可以参考下
    2019-12-12
  • 为什么MySQL数据库索引选择使用B+树?

    为什么MySQL数据库索引选择使用B+树?

    今天小编就为大家分享一篇关于为什么MySQL数据库索引选择使用B+树?,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2019-03-03
  • MySQL索引最左匹配原则实例详解

    MySQL索引最左匹配原则实例详解

    最左匹配原则就是指在联合索引中,如果你的SQL语句中用到了联合索引中的最左边的索引,那么这条SQL语句就可以利用这个联合索引去进行匹配,下面这篇文章主要给大家介绍了关于MySQL索引最左匹配原则的相关资料,需要的朋友可以参考下
    2022-09-09
  • MySQL5.7.14下载安装图文教程及MySQL数据库语句入门大全

    MySQL5.7.14下载安装图文教程及MySQL数据库语句入门大全

    这篇文章主要介绍了MySQL5.7.14下载安装详细教程及MySQL数据库语句入门大全的相关资料,非常不错,具有参考借鉴价值,需要的朋友可以参考下
    2016-09-09
  • mysql中如何去除小数点后面多余的0

    mysql中如何去除小数点后面多余的0

    这篇文章主要介绍了mysql 中去除小数点后面多余的0的方法 ,需要的朋友可以参考下
    2014-03-03
  • Windows下MySQL8.0.18安装教程(图解)

    Windows下MySQL8.0.18安装教程(图解)

    这篇文章主要介绍了Windows下MySQL8.0.18安装教程,本文图文并茂给大家介绍的非常详细,具有一定的参考借鉴价值,需要的朋友可以参考下
    2019-11-11
  • MYSQL如何自动为查询数据的结果编上序号详解

    MYSQL如何自动为查询数据的结果编上序号详解

    这篇文章主要给大家介绍了关于MYSQL如何自动为查询数据的结果编上序号的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用mysql具有一定的参考学习价值,需要的朋友们下面随着小编来一起看看吧。
    2017-11-11
  • 使用innodb_force_recovery解决MySQL崩溃无法重启问题

    使用innodb_force_recovery解决MySQL崩溃无法重启问题

    这篇文章主要介绍了使用innodb_force_recovery解决MySQL崩溃无法重启问题,这只一个成功案例,并不是万能的解决方法,需要酌情考虑,需要的朋友可以参考下
    2015-05-05
  • 使用MySQL如何实现分页查询

    使用MySQL如何实现分页查询

    这篇文章主要介绍了使用MySQL如何实现分页查询,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教
    2022-05-05

最新评论