如何解决mysql导入sql文件慢、错等问题

 更新时间:2024年09月06日 12:20:44   作者:寅灯  
这篇文章主要介绍了如何解决mysql导入sql文件慢、错等问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教

mysql导入sql文件慢、错等问题

在服务开发过程经常有数据迁移、备份、sql导入需求,而在mysql导入sql文件过程中经常出现慢、错等问题,尤其是通过mysql客户端(比如Nacivat)导入速度更慢。

今天我们选用一个新的导入方案,用MySQL自带的source导入,进行部分自定义操作,速度更快、统一提交;原理:减少网络请求、关闭日志打印、关闭自动提交(开启手动提交),目的是均是为了提高导入效率。

废话少说,现在开始吧。

1、命令行登录数据库

mysql -uroot -p

2、创建数据库

如果数据库还没有创建的话

create database demo;

3、设置参数

#临时关闭二进制日志
set sql_log_bin=off;

#临时关闭事务自动提交
set autocommit=0;

4、使用某个数据库

use demo;

5、手动开启事务

start transaction;

6、执行source导入sql文件

  • 1)linux环境
source .../test.sql
  • 2)win环境
source D:\...\test.sql

或者

source D:/.../test.sql

7、手动提交事务请求

commit;

8、还原最初的配置

#恢复二进制日志
set sql_log_bin=on;
#恢复事务自动提交
set autocommit=1;

理想情况下数据一次性成功导入。

9、注意事项

1)表的最大容量问题 max_allowed_packet

show variables like '%max_allowed_packet%';
select @@max_allowed_packet;

查询:

手动设置

set global max_allowed_packet = 102410141024;

重启mysq才能生效

2) 表的大小写问题

有些业务有大写和小写的表,设置不区分,比如linux环境mysql默认区分;

但是win环境默认不区分;

因此必须保持一致

show variables like "%case%";

结果

原理

  • lower_case_table_names = 0 区分大小写,默认是这种设置
  • lower_case_table_names = 1 不区分大小写

当然,需要在配置文件中修改ini或者cnf 文件里添加。

原理可以参考

3)导入数据时字符集设置问题

报错:mysql数据库导入出错

ERROR:Unknown command ‘\’

核对此数据的字符集和脚本文件里的字符集是否一直,核对后你就会恍然大悟!

这样核对!

除此之外、还有其他类似的设置问题,当然要举一反三!

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

相关文章

  • MySQL在Windows中net start mysql 启动MySQL服务报错 发生系统错误解决方案

    MySQL在Windows中net start mysql 启动MySQL服务报错 发生系统错误解决方案

    这篇文章主要介绍了MySQL在Windows中net start mysql 启动MySQL服务报错 发生系统错误解决方案,以下就是详细内容,需要的朋友可以参考下
    2021-07-07
  • mysql调优的几种方式小结

    mysql调优的几种方式小结

    本文主要介绍了mysql调优的几种方式小结,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2023-05-05
  • MySQL可直接使用的查询表的列信息(实现方案)

    MySQL可直接使用的查询表的列信息(实现方案)

    本文介绍了如何使用SQL快速将下划线命名的表字段转换为驼峰命名格式,包括确定下划线位置、找到第一个字符、截取并拼接字符串等步骤,通过使用LOCATE、CONCAT、UCASE和LOWER等函数,可以实现高效的字段命名转换,感兴趣的朋友跟随小编一起看看吧
    2025-01-01
  • Linux下指定mysql数据库数据配置主主同步的实例

    Linux下指定mysql数据库数据配置主主同步的实例

    Linux下指定数据库数据配置主主同步的实例,有需要的朋友可以参考下
    2013-01-01
  • MySQL 8 二进制日志(binlog)自动过期设置方法

    MySQL 8 二进制日志(binlog)自动过期设置方法

    MySQL的二进制日志(binlog)是数据库核心日志之一,记录了所有数据修改操作(如 INSERT、UPDATE、DELETE),用于数据恢复、主从复制等场景,本文介绍MySQL 8 二进制日志(binlog)自动过期设置方法,感兴趣的朋友一起看看吧
    2025-11-11
  • MySQL实现免密登录的三种配置方式

    MySQL实现免密登录的三种配置方式

    我们登录MySQL的时候有时候会忘记root密码,这时我们需要免密登录,所以这篇文章给大家介绍了MySQL免密登录的三种方式,文章通过是示例代码给出了详细的配置方案,需要的朋友可以参考下
    2024-03-03
  • Mysql 数据库访问类

    Mysql 数据库访问类

    Mysql数据库访问类 实现代码,对于想学习mysql操作类的朋友值得一看
    2009-02-02
  • Mysql锁内部实现机制之C源码解析

    Mysql锁内部实现机制之C源码解析

    数据库之所以要加锁,因为数据库是一个多用户使用的共享资源。当多个用户并发地存取数据时,在数据库中就会产生多个事务同时存取同一数据的情况。若对并发操作不加控制就可能会读取和存储不正确的数据,破坏数据库的一致性
    2022-08-08
  • 解决MySQL数据库意外崩溃导致表数据文件损坏无法启动的问题

    解决MySQL数据库意外崩溃导致表数据文件损坏无法启动的问题

    这篇文章主要介绍了MySQL数据库意外崩溃导致表数据文件损坏无法启动的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2020-07-07
  • MySQL中的常用函数及用法总结

    MySQL中的常用函数及用法总结

    MySQL是一种常用的关系型数据库管理系统,它提供了许多内置函数来处理数据,本文将介绍MySQL中的各种常用函数,包括字符串函数、日期函数、数学函数、聚合函数等,需要的朋友可以参考下
    2023-06-06

最新评论