MySQL批量插入数据为什么比逐个插入效率高?
一、MySQL批量插入数据为什么比逐个插入效率高
数据库的一个插入动作,包含了连接,传输,执行,提交/回滚 等等的动作,在 执行的时候可能还会遇到锁表,等待等等,所以,批量插比逐个插效率高,是大部分情况,而不是绝对情况。
大部分情况下,批量插和逐个插,在执行层面,耗时接近;而不用多次连接数据库,在数据传输层面,也是一次性传输效率高(网络传输和这个模型类似,也有很多前置后置过程),而提交,也是只发起了一次,因而显得效率高。
在特殊情况下,比如插入的数据是业务表,每行的数据量较大,且该表访问频繁,那么,插入1条的时候可能不会锁表,而插入10000行的时候,会遇到锁表的情况。如果并发插入,甚至发生死锁。这个时候,就要根据经验分析,调整每个批次的量,以避免影响使用。
举个例子:
begin:
insert into ( (‘a’) , (‘b’) …);
commit;
这样批量提交和
insert into(‘a’) ;
insert into (‘b’);
看上去也不需要多久,你看看非编译型的语言php,js几乎都不需要多久,你10w行sql对应其他代码的parser,你想想一个10wjs需要编译很久吗?也不需要很久。
延伸阅读:
二、什么是Memory引擎
Memory引擎是Mysql的内存引擎,在实现上,Memory存储引擎不同于Innodb这种组织索引结构(索引即是数据,即数据存放在主键索引上),而是将索引和数据分开存储。索引采用Hash的形式,存放主键id和指向数据的指针,而数据则按插入顺序存放。我们称这种数据组织方式为堆组织方式。

相关推荐HOT
更多>>
mysql经常提示too many connections是什么原因?
一、mysql提示too many connections的原因1、访问量过高当 MySQL 服务器面对大量的并发请求时,已经建立的连接数可能会不足以处理所有的请求,...详情>>
2023-10-16 22:53:10
小白学习Python,需要下载哪些软件?
一、Python解释器Python解释器是运行Python代码的核心工具。你可以从Python官方网站(https://www.python.org)上下载最新版本的Python解释器。...详情>>
2023-10-16 21:49:37
mysql如果单表数据量过千万怎么办?
一、mysql如果单表数据量过千万怎么办方案概述方案一:优化现有mysql数据库。优点:不影响现有业务,源程序不需要修改代码,成本最低。缺点:有...详情>>
2023-10-16 19:07:01
图数据库、mysql和kv数据库有什么不同?
一、图数据库、mysql和kv数据库有什么不同区别还是很大的,最根本的区别还是底层存储结构上的区别。图数据库应该就是使用图作为底层存储结构。...详情>>
2023-10-16 17:35:33热门推荐
访问网页的背后发生了什么?
沸python在实际工作中的应用有哪些?
热mysql经常提示too many connections是什么原因?
热开发人员为什么需要要有组件化思维?
新小白学习Python,需要下载哪些软件?
mysql为什么需要undo log?
到底什么情况下mysql innodb会发生回表操作?
Realm是什么?
有了Kafka+流处理框架,为什么还需要时序数据库?
mysql如果单表数据量过千万怎么办?
为什么没有以hbase作为存储引擎的关系型数据库实现?
软件app系统软件开发公司哪家好有哪些呢?
图数据库、mysql和kv数据库有什么不同?
NoSQL 运动给数据库系统留下什么宝贵的思想?
技术干货






