为了账号安全,请及时绑定邮箱和手机立即绑定

当事务遇到了IO

标签:
MySQL


此讨论仅限于Innodb存储引擎;

DBA与研发人员沟通的时候常常会说 “拒绝大事务,这事务太大啦,拆开”,“你要批量提交”;“什么,批量提交?这岂不是成了一个大事务?”

我根据自己的理解简单说明下,拒绝大事务,批量提交是针对不同“场景”的;

大事务就意味着锁持有的时间比较长(尽管Innodb是行锁):

缺点:

1、造成锁等待,其他需要同样row的事务处于lock wait状态,加大响应时间;

2、对一张表并发较高的时候,造成死锁几率较高

3、对于replication环境,会造成slave延迟较高(单线程SQL执行更改)

拆分大事务的话基本会提高并发量,降低死锁几率,减小slave延迟,是不是全部采用“小”事务就万事ok啦?

万事没有绝对,对于insert 语句,我有200w行记录,我执行200w次提交,这样事务就足够小啦;

这样并发量很高,基本无死锁,但master 和slave的IO 就快要受不了啦;

首先从SQL语句解析上,就需要解析200w次(暂不考虑使用prepare statement的情况)

其次如果insert字段中包含主键,那基本上是insert 一次,commit一次,就会产生一次IO,也就是会产生>=200w次IO;如果是非主键的话,innodb会利用其 insert buffer,change buffer等就合并IO,但这样做的效率不会显著太多,程序端在不断的insert;可以考虑每次提交2000条,分多次提交;这样就会降低IO利用率,slave可以平稳的过度;

什么时候事务保证足够的并发量,又要降低IO利用率呢,这杆秤还是需要DBA来实时的观察,比如借助zabbix这样优秀的监控工具,监控你的QPS,响应时间,IO利用率适当的调整!

有什么疑问随时讨论!

©著作权归作者所有:来自51CTO博客作者位鹏飞的原创作品,如需转载,请注明出处,否则将追究法律责任

MySQLIO事务数据库


点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
意见反馈 帮助中心 APP下载
官方微信

举报

0/150
提交
取消