为了账号安全,请及时绑定邮箱和手机立即绑定

浅谈MySQL Buffer学习及思考

标签:
MySQL

    本博文旨在结合自己看书理解,并借此图进行说明,如有谬误,望大家指正,以共同探讨为目的,交流学习。

首先介绍一下此图的由来:最近看关于mysql方面书籍的一点心得,把文字转化成图片而得,方便理解。

 

然后对以上参数进行一下简单的介绍:

 

1、max_connections这个参数,这个参数指MySql的最大连接数,如果服务器的并发连接请求量比较大,建议调高此值,以增加并行连接数量,服务器根据自己的实际情况进行增加,如果连接数越多,因MySql会为每个连接提供连接缓冲区,就会开销越多的内存,所以要适当调整该值,不能盲目提高设值。可以过mysql -e "SHOW VARIABLES LIKE 'max_connections';"查看当前状态的连接数量来设定该值大小。当你常看到Too many connections 错误,可以增加此值了,默认是100。 

 

2、back_log这个参数主要是基于max_connections进行的一个额外连接,也就是说当mysql连接大于max_connections设置的值的话,而又在(max_connections+back_log)之间,则mysql会把新连接放到堆栈中,等待之前连接的process释放,如果当前最大请求超过了(max_connections+back_log),就不会授权连接,当然该值也受约于系统的TCP/IP连接的侦听队列(系统的tcp_max_syn_backlog值的大小),可以通过cat /proc/sys/net/ipv4/tcp_max_syn_backlog查看,当然可以修改该值 

sysctl -w net.ipv4.tcp_max_syn_backlog=N或在/etc/sysctl.conf中添加tcp_max_syn_backlog=N即可。 

 

 

    由于mysql被称为内存式数据库,当然很内存是密不可分了,而他和内存的关系主要是通过缓冲区大小的几个参数吧。

 

缓冲包括:全局缓冲和局部缓冲。

 

全局缓冲参数大致有如下:

key_buffer_size, innodb_buffer_pool_size, innodb_additional_mem_pool_size,innodb_log_buffer_size, query_cache_size 

而局部缓冲(我自己习惯这么叫,虽然不专业,呵呵)一般mysql还会为每个连接分配连接缓冲。

全局缓冲在上篇博客中有介绍,这地方就省略了。

 

局部缓存:

    每个连接到MySQL服务器的线程都需要有自己的缓冲。大概需要立刻分配256K,甚至在线程空闲时,它们使用默认的线程堆栈,网络缓存等。事务开始之后,则需要增加更多的空间。运行较小的查询可能仅给指定的线程增加少量的内存消耗,然而如果对数据表做复杂的操作例如扫描、排序或者需要临时表,则需分配大约read_buffer_size,sort_buffer_size,read_rnd_buffer_size,tmp_table_size大小的内存空间。不过它们只是在需要的时候才分配,并且在那些操作做完之后就释放了。有的是立刻分配成单独的组块。tmp_table_size可能高达MySQL所能分配给这个操作的最大内存空间了。注意,这里需要考虑的不只有一点——可能会分配多个同一种类型的缓存,例如用来处理子查询。一些特殊的查询的内存使用量可能更大——如果在MyISAM表上做成批的插入时需要分配bulk_insert_buffer_size 大小的内存;执行 ALTER TABLE, OPTIMIZE TABLE, REPAIR TABLE命令时需要分配myisam_sort_buffer_size大小的内存。 

 

 

read_buffer_size是MySql读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区,MySql会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。如果对表的顺序扫描请求非常频繁,并且你认为频繁扫描进行得太慢,可以通过增加该变量值以及内存缓冲区大小提高其性能。  

 

sort_buffer_size是MySql执行排序使用的缓冲大小。如果想要增加ORDER BY的速度,首先看是否可以让MySQL使用索引而不是额外的排序阶段。如果不能,可以尝试增加sort_buffer_size变量的大小。  

 

read_rnd_buffer_size是MySql的随机读缓冲区大小。当按任意顺序读取行时(例如,按照排序顺序),将分配一个随机读缓存区。进行排序查询时,MySql会首先扫描一遍该缓冲,以避免磁盘搜索,提高查询速度,如果需要排序大量数据,可适当调高该值。但MySql会为每个客户连接发放该缓冲空间,所以应尽量适当设置该值,以避免内存开销过大。  

 

tmp_table_size是MySql的heap(堆积)表缓冲大小。所有联合在一个DML指令内完成,并且大多数联合甚至可以不用临时表即可以完成。大多数临时表是基于内存的(HEAP)表。具有大的记录长度的临时表(所有列的长度的和)或包含BLOB列的表存储在硬盘上。如果某个内部heap(堆积)表大小超过tmp_table_size,MySQL可以根据需要自动将内存中的heap表改为基于硬盘的MyISAM表。还可以通过设置tmp_table_size选项来增加临时表的大小。也就是说,如果调高该值,MySql同时将增加heap表的大小,可达到提高联接查询速度的效果。 

 

  以上是结合自己常用的参数并查询mysql手册总结的。方便更直观的学习和理解。均个人见解,如有疑问,可共同交流学习!

 

 

©著作权归作者所有:来自51CTO博客作者Ro_410的原创作品,如需转载,请注明出处,否则将追究法律责任

mysql优化mysql学习mysql bufferMySQL DBA


点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
意见反馈 帮助中心 APP下载
官方微信

举报

0/150
提交
取消