mysql技巧：提高插入数据(添加记录)的速度
更新时间：2014年12月20日 00:54:29 投稿：mdxy-dxy
这篇文章主要介绍了mysql技巧：提高插入数据(添加记录)的速度,需要的朋友可以参考下
问题描述：
普通台式机，采集数据，表中已经有>1000万数据量。
采集回来的数据插入表中的时候很慢，每条约100毫秒。
解决方法：
1、加大mysql配置中的bulk_insert_buffer_size，这个参数默认为8M
bulk_insert_buffer_size=100M
2、改写所有insert语句为insert delayed
这个insert delayed不同之处在于：立即返回结果，后台进行处理插入。
还有一个技巧是在一跳insert中插入多条数据，类似insert into tablename values('xxx','xxx'),('yyy','yyy'),('zzz','zzz')...;但是在我采集程序中改sql比较麻烦，故未采用
脚本之家小编提醒：
说实话一般主要用于数据的采集入库操作，成熟的cms不建议修改，dedecms是由于本人的系统设计问题，建议使用商业版或自行建立索引等，现在大数据首选帝国cms或phpcms。
相关文章
这篇文章主要介绍了MySQL中组合字段之concat()，MySQL是关系型数据库，我们在使用的时候往往会将对象的属性映射成列存储在表中，因此查询的到的结果在不做任何处理的情况下，也是一个个单独的属性,需要的朋友可以参考一下2021-11-11
浅析centos 7 mysql-8.0.19-1.el7.x86_64.rpm-bundle.tar
这篇文章主要介绍了centos 7 mysql-8.0.19-1.el7.x86_64.rpm-bundle.tar的相关知识,需要的朋友可以参考下2020-01-01
navicat中创建存储过程、触发器和使用游标的简单实例(图文)
这篇文章主要介绍了navicat中创建存储过程、触发器和使用游标的简单实例,需要的朋友可以参考下2017-02-02
在使用MySQL的过程中,相比大家都踩过不少坑,下面这篇文章主要给大家介绍了关于Mysql常见bug及解决方案超详细讲解的相关资料,文中介绍的非常详细,需要的朋友可以参考下2023-06-06
这篇文章主要介绍了详解关于MySQL 8.0走过的坑，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-09-09
这篇文章主要给大家介绍了MySQL共享锁引发的死锁问题的原因和解决办法,文中通过代码示例和图文介绍的非常详细,对大家的学习或工作有一定的帮助,需要的朋友可以参考下2023-11-11
本文详细给大家介绍了mysql5.7.19 zip 详细安装过程和配置，感兴趣的朋友一起看看吧2017-10-10
本文给大家介绍的是简单几步轻松搞定Windows上安装Mysql5.7，具有一定的参考价值,感兴趣的小伙伴们可以参考一下2018-10-10
mysql数据库存储引擎为MyISAM的时候,在大访问量的情况下数据表有可能会出现被锁的情况，这就会导致用户连接网站时超时而返回502，此时就需要MySQL数据库MyISAM存储引擎转为Innodb，这篇文章主要介绍了MySQL数据库MyISAM存储引擎转为Innodb的方法,需要的朋友可以参考下2014-06-06
这篇文章主要讨论为什么MySQL 删除表数据 磁盘空间还一直被占用，项目中使用Mysql作为数据库，对于表来说，一般为表结构和表数据。表结构占用空间都是比较小的，一般都是表数据占用的空间。接下来小编就和大家一起进入下面文章内容的学习2021-10-10
最新评论