mysql缓冲和缓存设置详解
MySQL 可调节设置可以应⽤于整个 mysqld进程,也可以应⽤于单个客户机会话。
服务器端的设置
每个表都可以表⽰为磁盘上的⼀个⽂件,必须先打开,后读取。为了加快从⽂件中读取数据的过程,mysqld对这些打开⽂件进⾏了缓存,其最⼤数⽬由 /f 中的table_cache 指定。清单 4给出了显⽰与打开表有关的活动的⽅式。
清单 4. 显⽰打开表的活动
mysql> SHOW STATUS LIKE 'open%tables';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+香菇鸡翅
| Open_tables | 5000 |
梦见别人数钱| Opened_tables | 195 |
+---------------+-------+
2 rows in t (0.00 c)
清单 4 说明⽬前有 5,000 个表是打开的,有 195个表需要打开,因为现在缓存中已经没有可⽤⽂件描述符了(由于统计信息在前⾯已经清除了,因此可能会存在 5,000 个打开表中只有 195个打开记录的情况)。如果 Opened_tables 随着重新运⾏SHOW STATUS 命令快速增加,就说明缓存命中率不够。如果Open_tables ⽐table_cache设置⼩很多,就说明该值太⼤了(不过有空间可以增长总不是什么坏事)。例如,使⽤ table_cache =5000 可以调整表的缓存。
与表的缓存类似,对于线程来说也有⼀个缓存。 mysqld在接收连接时会根据需要⽣成线程。在⼀个连接变化很快的繁忙服务器上,对线程进⾏缓存便于以后使⽤可以加快最初的连接。
清单 5 显⽰如何确定是否缓存了⾜够的线程。
清单 5. 显⽰线程使⽤统计信息
mysql> SHOW STATUS LIKE 'threads%';
+-------------------+--------+
| Variable_name | Value |
+-------------------+--------+
| Threads_cached | 27 |
| Threads_connected | 15 |
| Threads_created | 838610 |
| Threads_running | 3 |
+-------------------+--------+
4 rows in t (0.00 c)
此处重要的值是 Threads_created,每次mysqld 需要创建⼀个新线程时,这个值都会增加。如果这个数字在连续执⾏SHOW STATUS 命令时快速增加,就应该尝试增⼤线程缓存。例如,可以在myf 中使⽤ thread_cache = 40 来实现此⽬的。
关键字缓冲区保存了 MyISAM 表的索引块。理想情况下,对于这些块的请求应该来⾃于内存,⽽不是来⾃于磁盘。清单 6显⽰了如何确定有多少块是从磁盘中读取的,以及有多少块是从内存中读取的。
清单 6. 确定关键字效率
mysql> show status like '%key_read%';
+-------------------+-----------+
| Variable_name | Value |
+-------------------+-----------+
| Key_read_requests | 163554268 |
| Key_reads | 98247 |
+-------------------+-----------+
2 rows in t (0.00 c)
茹谢Key_reads 代表命中磁盘的请求个数,Key_read_requests是总数。命中磁盘的读请求数除以读请求总数就是不中⽐率 ——在本例中每 1,000 个请求,⼤约有 0.6 个没有命中内存。如果每1,000 个请求中命中磁盘的数⽬超过 1 个,就应该考虑增⼤关键字缓冲区了。例如,key_buffer =384M 会将缓冲区设置为 384MB。
临时表可以在更⾼级的查询中使⽤,其中数据在进⼀步进⾏处理(例如 GROUPBY字句)之前,都必须先保存到临时表中;理想情况下,在内存中创建临时表。但是如果临时表变得太⼤,就需要写⼊磁盘中。清单 7给出了与临时表创建有关的统计信息。
清单 7. 确定临时表的使⽤
印第安头饰mysql> SHOW STATUS LIKE 'created_tmp%';
+-------------------------+-------+
| Variable_name | Value |
+-------------------------+-------+
| Created_tmp_disk_tables | 30660 |
| Created_tmp_files | 2 |
| Created_tmp_tables | 32912 |
+-------------------------+-------+
3 rows in t (0.00 c)
每次使⽤临时表都会增⼤ Created_tmp_tables;基于磁盘的表也会增⼤ Created_tmp_disk_tables。对于这个⽐率,并没有什么严格的规则,因为这依赖于所涉及的查询。长时间观察Created_tmp_disk_tables会显⽰所创建的磁盘表的⽐率,您可以确定设置的效率。 tmp_table_size和 max_heap_table_size都可以控制临时表的最⼤⼤⼩,因此请确保在 myf 中对这两个值都进⾏了设置。
每个会话的设置
下⾯这些设置针对于每个会话。在设置这些数字时要⼗分谨慎,因为它们在乘以可能存在的连接数时候,这些选项表⽰⼤量的内存!您可以通过代码修改会话中的这些数字,或者在 myf 中为所有会话修改这些设置。
当 MySQL必须要进⾏排序时,就会在从磁盘上读取数据时分配⼀个排序缓冲区来存放这些数据⾏。如果要排序的数据太⼤,那么数据就必须保存到磁盘上的临时⽂件中,并再次进⾏排序。如果 sort_merge_pass状态变量很⼤,这就指⽰了磁盘的活动情况。清单 8 给出了⼀些与排序相关的状态计数器信息。
清单 8. 显⽰排序统计信息梅毒有什么症状
mysql> SHOW STATUS LIKE "sort%";
+-------------------+---------+
| Variable_name | Value |
+-------------------+---------+
| Sort_merge_pass | 1 |
| Sort_range | 79192 |
lol精粹
| Sort_rows | 2066532 |
| Sort_scan | 44006 |
+-------------------+---------+
4 rows in t (0.00 c)
如果 sort_merge_pass 很⼤,就表⽰需要注意sort_buffer_size。例如,sort_buffer_size = 4M 将排序缓冲区设置为 4MB。
MySQL也会分配⼀些内存来读取表。理想情况下,索引提供了⾜够多的信息,可以只读⼊所需要的⾏,但是有时候查询(设计不佳或数据本性使然)需要读取表中⼤量数据。要理解这种⾏为,需要知道运⾏了多少个 SELECT语句,以及需要读取表中的下⼀⾏数据的次数(⽽不是通过索引直接访问)。实现这种功能的命令如清单 9 所⽰。
清单 9. 确定表扫描⽐率
mysql> SHOW STATUS LIKE "com_lect";
+---------------+--------+
多元文化教育| Variable_name | Value |
+---------------+--------+
| Com_lect | 318243 |
+---------------+--------+
1 row in t (0.00 c)
mysql> SHOW STATUS LIKE "handler_read_rnd_next";
舒适的拼音
+-----------------------+-----------+
| Variable_name | Value |
+-----------------------+-----------+
| Handler_read_rnd_next | 165959471 |
+-----------------------+-----------+
1 row in t (0.00 c)
Handler_read_rnd_next /Com_lect 得出了表扫描⽐率 —— 在本例中是 521:1。如果该值超过4000,就应该查看
read_buffer_size,例如read_buffer_size = 4M。如果这个数字超过了8M,就应该与开发⼈员讨论⼀下对这些查询进⾏调优了!
查看数据库缓存配置情况
mysql> SHOW VARIABLES LIKE ‘%query_cache%';
+——————————+———+
| Variable_name | Value |
+——————————+———+
| have_query_cache | YES | –查询缓存是否可⽤
| query_cache_limit | 1048576 | –可缓存具体查询结果的最⼤值
| query_cache_min_res_unit | 4096 |
| query_cache_size | 599040 | –查询缓存的⼤⼩
| query_cache_type | ON | –阻⽌或是⽀持查询缓存
| query_cache_wlock_invalidate | OFF |
+——————————+———+
配置⽅法:
在MYSQL的配置⽂件my.ini或myf中找到如下内容:
# Query cache is ud to cache SELECT results and later returnthem
# without actual executing the same query once again. Having thequery
# cache enabled may result in significant speed improvements, ifyour
# have a lot of identical queries and rarely changing tables.See the
# "Qcache_lowmem_prunes" status variable to check if the currentvalue
# is high enough for your load.
# Note: In ca your tables change very often or if your queriesare
# textually different every time, the query cache may result ina
# slowdown instead of a performance improvement.
query_cache_size=0
以上信息是默认配置,其注释意思是说,MYSQL的查询缓存⽤于缓存lect查询结果,并在下次接收到同样的查询请求时,不再执⾏实际查询处理⽽直接返回结果,有这样的查询缓存能提⾼查询的速度,使查询性能得到优化,前提条件是你有⼤量的相同或相似的查询,⽽很少改变表⾥的数据,否则没有必要使⽤此功能。可以通过Qcache_lowmem_prunes变量的值来检查是否当前的值满⾜你⽬前系统的负载。注意:如果你查询的表更新⽐较频繁,⽽且很少有相同的查询,最好不要使⽤查询缓存。
具体配置⽅法:
1.将query_cache_size设置为具体的⼤⼩,具体⼤⼩是多少取决于查询的实际情况,但最好设置为1024的倍数,参考值32M。2.增加⼀⾏:query_cache_type=1
query_cache_type参数⽤于控制缓存的类型,注意这个值不能随便设置,必须设置为数字,可选项⽬以及说明如下:
如果设置为0,那么可以说,你的缓存根本就没有⽤,相当于禁⽤了。但是这种情况下query_cache_size设置的⼤⼩系统是否要为其分配呢,这个问题有待于测试?
如果设置为1,将会缓存所有的结果,除⾮你的lect语句使⽤SQL_NO_CACHE禁⽤了查询缓存。
如果设置为2,则只缓存在lect语句中通过SQL_CACHE指定需要缓存的查询。
OK,配置完后的部分⽂件如下:
query_cache_size=128M
query_cache_type=1
保存⽂件,重新启动MYSQL服务,然后通过如下查询来验证是否真正开启了:
mysql> show variables like '%query_cache%';
+——————————+———–+
| Variable_name |Value |
+——————————+———–+
| have_query_cache |YES |
| query_cache_limit |1048576 |
| query_cache_min_res_unit |4096 |
| query_cache_size | 134217728|
| query_cache_type |ON |
| query_cache_wlock_invalidate | OFF |
+——————————+———–+
6 rows in t (0.00 c)
主要看query_cache_size和query_cache_type的值是否跟我们设的⼀致:
这⾥query_cache_size的值是134217728,我们设置的是128M,实际是⼀样的,只是单位不同,可以⾃⼰换算下:134217728 = 128*1024*1024。
query_cache_type设置为1,显⽰为ON,这个前⾯已经说过了。
总之,看到上边的显⽰表⽰设置正确,但是在实际的查询中是否能够缓存查询,还需要⼿动测试下,我们可以通过show statuslike '%Qcache%';语句来测试,现在我们开启了查询缓存功能,在执⾏查询前,我们先看看相关参数的值:mysql> show status like '%Qcache%';
+————————-+———–+
| Variable_name |Value |
+————————-+———–+
| Qcache_free_blocks |1 |
| Qcache_free_memory | 134208800|
| Qcache_hits |0 |