MySQL Server 优化
上一小节我们介绍了 SQL 语句的优化思路,接下来我们继续从实战角度,从安装、日志、内存、并发四个方面学习 MySQL Server 的优化方法。
1. 安装配置优化
1.1 版本选择
一般推荐选择二进制发行版,原因有如下好处:
- 安装方式简单,可以快速完成部署;
- 经过MySQL官方的测试、验证和编译,稳定性较好。
1.2 关闭 numa
--以CentOS 6为例,在kernel一行后面添加numa=off
vi /boot/grub/grub.conf
1.3 limits.conf配置
vi /etc/security/limits.conf
mysql soft nofile 65535
mysql hard nofile 65535
mysql soft nproc 65535
mysql hard nproc 65535
1.4 关闭大页内存
echo "never" > /sys/kernel/mm/transparent_hugepage/enabled
echo "never" > /sys/kernel/mm/transparent_hugepage/defrag
2. 日志配置优化
2.1 innodb_flush_log_at_trx_commit和sync_binlog
innodb_flush_log_at_trx_commit和sync_binlog这两个参数是控制MySQL磁盘写入策略以及数据安全性的关键参数。
innodb_flush_log_at_trx_commit:
- 0:参数值为0时,由mysql的main_thread每秒将存储引擎log buffer中的redo日志写入到log file,并调用文件系统的sync操作,将日志刷新到磁盘。
- 1:参数值为1时,每次事务提交时,将存储引擎log buffer中的redo日志写入到log file,并调用文件系统的sync操作,将日志刷新到磁盘。
- 2:参数值为2时,每次事务提交时,将存储引擎log buffer中的redo日志写入到log file,并由存储引擎的main_thread 每秒将日志刷新到磁盘。
sync_binlog:
- 0:参数值为0时,存储引擎不进行binlog的刷新到磁盘,而由操作系统的文件系统控制缓存刷新。
- 1:参数值为1时,每提交一次事务,存储引擎调用文件系统的sync操作进行一次缓存的刷新,这种方式最安全,但性能较低。
- n:当提交的日志组=n时,存储引擎调用文件系统的sync操作进行一次缓存的刷新。
innodb_flush_log_at_trx_commit和sync_binlog都为 1 时是最安全的,在 MySQL 服务崩溃或服务器crash 的情况下,binary log 只有可能丢失最多一个语句或者一个事务,但双 1 模式也是最慢的,会导致频繁的 IO 操作。
实际使用时,需要综合考量这两个参数,可以针对不同的业务场景进行压力测试,找到平衡点。
2.2 innodb_log_buffer_size
innodb_log_buffer_size 是 InnoDB 重做日志的缓存池大小,默认是 8MB。如果有大量更新操作,可以适当增加其大小,避免过多的磁盘操作。
3. 内存优化
3.1 innodb_buffer_pool_size 的设置
innodb_buffer_pool_size 是用来缓存 InnoDB 的数据和索引的内存空间。在专用的数据库服务器上,一般分配 75% 的内存给到 InnoDB 的缓存池。
innodb buffer pool 的使用情况可以通过如下命令查看:
mysql> show status like '%innodb_buffer_pool%';
+---------------------------------------+-----------+
| Variable_name | Value |
+---------------------------------------+-----------+
| Innodb_buffer_pool_resize_status | |
| Innodb_buffer_pool_pages_data | 5123 |
| Innodb_buffer_pool_bytes_data | 83935232 |
| Innodb_buffer_pool_pages_dirty | 0 |
| Innodb_buffer_pool_bytes_dirty | 0 |
| Innodb_buffer_pool_pages_flushed | 284 |
| Innodb_buffer_pool_pages_free | 125933 |
| Innodb_buffer_pool_pages_misc | 0 |
| Innodb_buffer_pool_pages_total | 131056 |
| Innodb_buffer_pool_read_ahead_rnd | 0 |
| Innodb_buffer_pool_read_ahead | 0 |
| Innodb_buffer_pool_read_ahead_evicted | 0 |
| Innodb_buffer_pool_read_requests | 10187 |
| Innodb_buffer_pool_reads | 5056 |
| Innodb_buffer_pool_wait_free | 0 |
| Innodb_buffer_pool_write_requests | 2575 |
+---------------------------------------+-----------+
18 rows in set (0.03 sec)
可以计算出缓存池的命中率为:
Innodb_buffer_pool_read_hits = (( 1 - Innodb_buffer_pool_reads ) / Innodb_buffer_pool_read_requests ) * 100%
如果命中率太低,这时就需要考虑增加 innodb_buffer_pool_sized 的值了。
4.并发优化
4.1 max_connections
max_connections 表示连接到 MySQL 的最大会话数量。一般业务系统,设置成 500-1000 足够使用。
可以通过如下语句调整 max_connections 的大小:
-
临时:在 MySQL 中直接用命令行执行:
mysql> show variables like 'max_connections'; +--------------------------+-------+ | Variable_name | Value | +--------------------------+-------+ | max_connections | 500 | +--------------------------+-------+ 1 row in set (0.00 sec) mysql> set global max_connections=1000; Query OK, 0 rows affected (0.00 sec)
-
永久:将以下参数添加至配置文件 my.cnf,并重启 MySQL:
max_connections=1000
4.2 thread_cache_size
thread_cache_size 表示缓存一定数量的线程以备重用,可以加快连接 MySQL 的速度。
那么如何判断 thread_cache_size 的设置是否合理呢?通过如下公式计算 thread cache 的命中率,一般命中率高于 90% 才是合理的。
thread_cache_hits = (( 1 - Thread_created ) / connections ) * 100%
5. 小结
本小节主要介绍了 MySQL Server 优化的四种方法:
- 安装配置优化;
- 日志配置优化;
- 内存优化;
- 并发优化。
MySQL Server 的优化其实主要是参数的优化调整。一般情况下,参数优化并不能带来质的飞跃,除非原来的参数设置非常不合理。为了减少性能问题,我们应该在系统设计和开发阶段下功夫。