Mysql性能优化方案分享,mysql索引必须了解的几个

Mysql性能优化方案分享,mysql性能优化分享

网上有不少mysql 性能优化方案,不过,mysql的优化同sql server相比,更为麻烦,同样的设置,在不同的环境下 ,由于内存,访问量,读写频率,数据差异等等情况,可能会出现不同的结果,因此简单地根据某个给出方案来配置mysql是行不通的,最好能使用status信息对mysql进行具体的优化。

mysql> show global status;

可以列出MySQL服务器运行各种状态值,另外,查询MySQL服务器配置信息语句:
mysql> show variables;

一、慢查询

mysql> show variables like ‘%slow%‘;
 —————— ——- 
| Variable_name     | Value |
 —————— ——- 
| log_slow_queries | ON     |
| slow_launch_time | 2      |
 —————— ——- 

mysql> show global status like ‘%slow%‘;
 ——————— ——- 
| Variable_name        | Value |
 ——————— ——- 
| Slow_launch_threads | 0      |
| Slow_queries         | 4148 |
 ——————— ——- 

配置中打开了记录慢查询,执行时间超过2秒的即为慢查询,系统显示有4148个慢查询,你可以分析慢查询日志,找出有问题的SQL语句,慢查询时间不宜设置过长,否则意义不大,最好在5秒以内,如果你需要微秒级别的慢查询,可以考虑给MySQL打补丁:
打开慢查询日志可能会对系统性能有一点点影响,如果你的MySQL是主-从结构,可以考虑打开其中一台从服务器的慢查询日志,这样既可以监控慢查询,对系统性能影响又小。

二、连接数
经常会遇见”MySQL: ERROR 1040: Too many connections”的情况,一种是访问量确实很高,MySQL服务器抗不住,这个时候就要考虑增加从服务器分散读压力,另外一种情况是MySQL配置文件中max_connections值过小:

mysql> show variables like ‘max_connections‘;
 —————– ——- 
| Variable_name    | Value |
 —————– ——- 
| max_connections | 256   |
 —————– ——- 

这台MySQL服务器最大连接数是256,然后查询一下服务器响应的最大连接数:
mysql> show global status like ‘Max_used_connections‘;
MySQL服务器过去的最大连接数是245,没有达到服务器连接数上限256,应该没有出现1040错误,比较理想的设置是
Max_used_connections / max_connections * 100% ≈ 85%
最大连接数占上限连接数的85%左右,如果发现比例在10%以下,MySQL服务器连接数上限设置的过高了。
三、Key_buffer_size key_buffer_size是对MyISAM表性能影响最大的一个参数,下面一台以MyISAM为主要存储引擎服务器的配置:

mysql> show variables like ‘key_buffer_size‘; —————– ———— 
| Variable_name    | Value       |
 —————– ———— 
| key_buffer_size | 536870912 |
 —————– ———— 

分配了512MB内存给key_buffer_size,我们再看一下key_buffer_size的使用情况:

mysql> show global status like ‘key_read%‘;
 ———————— ————- 
| Variable_name           | Value        |
 ———————— ————- 
| Key_read_requests       | 27813678764 |
| Key_reads               | 6798830      |
 ———————— ————- 

一共有27813678764个索引读取请求,有6798830个请求在内存中没有找到直接从硬盘读取索引,计算索引未命中缓存的概率:
key_cache_miss_rate = Key_reads / Key_read_requests * 100% 比如上面的数据,key_cache_miss_rate为0.0244%,4000个索引读取请求才有一个直接读硬盘,已经很BT了,key_cache_miss_rate在0.1%以下都很好(每1000个请求有一个直接读硬盘),如果key_cache_miss_rate在0.01%以下的话,key_buffer_size分配的过多,可以适当减少。
MySQL服务器还提供了key_blocks_*参数:

mysql> show global status like ‘key_blocks_u%‘;
 ———————— ————- 
| Variable_name           | Value        |
 ———————— ————- 
| Key_blocks_unused       | 0            |
| Key_blocks_used         | 413543       |
 ———————— ————- 

Key_blocks_unused表示未使用的缓存簇(blocks)数,Key_blocks_used表示曾经用到的最大的blocks数,比如这台服务器,所有的缓存都用到了,要么增加key_buffer_size,要么就是过渡索引了,把缓存占满了。比较理想的设置:
Key_blocks_used / (Key_blocks_unused Key_blocks_used) * 100% ≈ 80%
四、临时表

mysql> show global status like ‘created_tmp%‘;
 ————————- ——— 
| Variable_name            | Value    |
 ————————- ——— 
| Created_tmp_disk_tables | 21197    |
| Created_tmp_files        | 58       |
| Created_tmp_tables       | 1771587 |
 ————————- ——— 

每次创建临时表,Created_tmp_tables增加,如果是在磁盘上创建临时表,Created_tmp_disk_tables也增加,Created_tmp_files表示MySQL服务创建的临时文件文件数,比较理想的配置是:
Created_tmp_disk_tables / Created_tmp_tables * 100% <= 25%比如上面的服务器Created_tmp_disk_tables / Created_tmp_tables * 100% = 1.20%,应该相当好了。我们再看一下MySQL服务器对临时表的配置:

mysql> show variables where Variable_name in (‘tmp_table_size‘, ‘max_heap_table_size‘);
 ——————— ———– 
| Variable_name        | Value      |
 ——————— ———– 
| max_heap_table_size | 268435456 |
| tmp_table_size       | 536870912 |
 ——————— ———– 

只有256MB以下的临时表才能全部放内存,超过的就会用到硬盘临时表。
五、Open Table情况

mysql> show global status like ‘open%tables%‘;
 ————— ——- 
| Variable_name | Value |
 ————— ——- 
| Open_tables    | 919    |
| Opened_tables | 1951  |
 ————— ——- 

Open_tables表示打开表的数量,Opened_tables表示打开过的表数量,如果Opened_tables数量过大,说明配置中table_cache(5.1.3之后这个值叫做table_open_cache)值可能太小,我们查询一下服务器table_cache值:

mysql> show variables like ‘table_cache‘;
 ————— ——- 
| Variable_name | Value |
 ————— ——- 
| table_cache    | 2048  |
 ————— ——- 

比较合适的值为:
Open_tables / Opened_tables * 100% >= 85%
Open_tables / table_cache * 100% <= 95%
**
六、进程使用情况
**

mysql> show global status like ‘Thread%‘;
 ——————- ——- 
| Variable_name      | Value |
 ——————- ——- 
| Threads_cached     | 46     |
| Threads_connected | 2      |
| Threads_created    | 570    |
| Threads_running    | 1      |
 ——————- ——- 

如果我们在MySQL服务器配置文件中设置了thread_cache_size,当客户端断开之后,服务器处理此客户的线程将会缓存起来以响应下一个客户而不是销毁(前提是缓存数未达上限)。Threads_created表示创建过的线程数,如果发现Threads_created值过大的话,表明MySQL服务器一直在创建线程,这也是比较耗资源,可以适当增加配置文件中thread_cache_size值,查询服务器thread_cache_size配置:

mysql> show variables like ‘thread_cache_size‘;
 ——————- ——- 
| Variable_name      | Value |
 ——————- ——- 
| thread_cache_size | 64     |
 ——————- ——- 

示例中的服务器还是挺健康的。
七、查询缓存(query cache)

mysql> show global status like ‘qcache%‘;
 ————————- ———– 
| Variable_name            | Value      |
 ————————- ———– 
| Qcache_free_blocks       | 22756      |
| Qcache_free_memory       | 76764704  |
| Qcache_hits              | 213028692 |
| Qcache_inserts           | 208894227 |
| Qcache_lowmem_prunes     | 4010916    |
| Qcache_not_cached        | 13385031  |
| Qcache_queries_in_cache | 43560      |
| Qcache_total_blocks      | 111212     |
 ————————- ———– 

MySQL查询缓存变量解释:
Qcache_free_blocks:缓存中相邻内存块的个数。数目大说明可能有碎片。FLUSH QUERY CACHE会对缓存中的碎片进行整理,从而得到一个空闲块。
Qcache_free_memory:缓存中的空闲内存。
Qcache_hits:每次查询在缓存中命中时就增大
Qcache_inserts:每次插入一个查询时就增大。命中次数除以插入次数就是不中比率。
Qcache_lowmem_prunes:缓存出现内存不足并且必须要进行清理以便为更多查询提供空间的次数。这个数字最好长时间来看;如果这个数字在不断增长,就表示可能碎片非常严重,或者内存很少。(上面的 free_blocks和free_memory可以告诉您属于哪种情况)
Qcache_not_cached:不适合进行缓存的查询的数量,通常是由于这些查询不是 SELECT 语句或者用了now()之类的函数。
Qcache_queries_in_cache:当前缓存的查询(和响应)的数量。
Qcache_total_blocks:缓存中块的数量。
我们再查询一下服务器关于query_cache的配置:

mysql> show variables like ‘query_cache%‘;
 —————————— ———– 
| Variable_name                 | Value      |
 —————————— ———– 
| query_cache_limit             | 2097152    |
| query_cache_min_res_unit      | 4096       |
| query_cache_size              | 203423744 |
| query_cache_type              | ON         |
| query_cache_wlock_invalidate | OFF        |
 —————————— ———– 

各字段的解释:
query_cache_limit:超过此大小的查询将不缓存
query_cache_min_res_unit:缓存块的最小大小
query_cache_size:查询缓存大小
query_cache_type:缓存类型,决定缓存什么样的查询,示例中表示不缓存 select sql_no_cache 查询
query_cache_wlock_invalidate:当有其他客户端正在对MyISAM表进行写操作时,如果查询在query cache中,是否返回cache结果还是等写操作完成再读表获取结果。
query_cache_min_res_unit的配置是一柄”双刃剑”,默认是4KB,设置值大对大数据查询有好处,但如果你的查询都是小数据查询,就容易造成内存碎片和浪费。
查询缓存碎片率 = Qcache_free_blocks / Qcache_total_blocks * 100%
如果查询缓存碎片率超过20%,可以用FLUSH QUERY CACHE整理缓存碎片,或者试试减小query_cache_min_res_unit,如果你的查询都是小数据量的话。
查询缓存利用率 = (query_cache_size – Qcache_free_memory) / query_cache_size * 100%
查询缓存利用率在25%以下的话说明query_cache_size设置的过大,可适当减小;查询缓存利用率在80%以上而且Qcache_lowmem_prunes > 50的话说明query_cache_size可能有点小,要不就是碎片太多。
查询缓存命中率 = (Qcache_hits – Qcache_inserts) / Qcache_hits * 100%
示例服务器 查询缓存碎片率 = 20.46%,查询缓存利用率 = 62.26%,查询缓存命中率 = 1.94%,命中率很差,可能写操作比较频繁吧,而且可能有些碎片。
八、排序使用情况

mysql> show global status like ‘sort%‘;
 ——————- ———— 
| Variable_name      | Value       |
 ——————- ———— 
| Sort_merge_passes | 29          |
| Sort_range         | 37432840    |
| Sort_rows          | 9178691532 |
| Sort_scan          | 1860569     |
 ——————- ———— 

Sort_merge_passes 包括两步。MySQL 首先会尝试在内存中做排序,使用的内存大小由系统变量 Sort_buffer_size 决定,如果它的大小不够把所有的记录都读到内存中,MySQL 就会把每次在内存中排序的结果存到临时文件中,等 MySQL 找到所有记录之后,再把临时文件中的记录做一次排序。这再次排序就会增加 Sort_merge_passes。实际上,MySQL 会用另一个临时文件来存再次排序的结果,所以通常会看到 Sort_merge_passes 增加的数值是建临时文件数的两倍。因为用到了临时文件,所以速度可能会比较慢,增加 Sort_buffer_size 会减少 Sort_merge_passes 和 创建临时文件的次数。但盲目的增加 Sort_buffer_size 并不一定能提高速度,见 How fast can you sort data with MySQL?(另外,增加read_rnd_buffer_size(3.2.3是record_rnd_buffer_size)的值对排序的操作也有一点的好处

九、文件打开数(open_files)

mysql> show global status like ‘open_files‘;
 ————— ——- 
| Variable_name | Value |
 ————— ——- 
| Open_files     | 1410  |
 ————— ——- 
mysql> show variables like ‘open_files_limit‘;
 —————— ——- 
| Variable_name     | Value |
 —————— ——- 
| open_files_limit | 4590  |
 —————— ——- 

比较合适的设置:Open_files / open_files_limit * 100% <= 75%
十、表锁情况

mysql> show global status like ‘table_locks%‘;
 ———————– ———– 
| Variable_name          | Value      |
 ———————– ———– 
| Table_locks_immediate | 490206328 |
| Table_locks_waited     | 2084912    |
 ———————– ———– 

Table_locks_immediate表示立即释放表锁数,Table_locks_waited表示需要等待的表锁数,如果Table_locks_immediate / Table_locks_waited > 5000,最好采用InnoDB引擎,因为InnoDB是行锁而MyISAM是表锁,对于高并发写入的应用InnoDB效果会好些。示例中的服务器Table_locks_immediate / Table_locks_waited = 235,MyISAM就足够了。
十一、表扫描情况

mysql> show global status like ‘handler_read%‘;
 ———————– ————- 
| Variable_name          | Value        |
 ———————– ————- 
| Handler_read_first     | 5803750      |
| Handler_read_key       | 6049319850  |
| Handler_read_next      | 94440908210 |
| Handler_read_prev      | 34822001724 |
| Handler_read_rnd       | 405482605    |
| Handler_read_rnd_next | 18912877839 |
 ———————– ————- 

调出服务器完成的查询请求次数:

mysql> show global status like ‘com_select‘;
 ————— ———– 
| Variable_name | Value      |
 ————— ———– 
| Com_select     | 222693559 |
 ————— ———– 

计算表扫描率:
表扫描率 = Handler_read_rnd_next / Com_select
如果表扫描率超过4000,说明进行了太多表扫描,很有可能索引没有建好,增加read_buffer_size值会有一些好处,但最好不要超过8MB。

以上就是本文的全部内容,希望对大家的学习有所帮助。

MySql错误代码1045的解决方案,mysql错误代码1045

错误代码 1045
Access denied for user 'root'@'localhost' (using password:YES) 解决办法是重新设置root用户密码,在Windows平台下操作步骤如下: 1、以系统管理员身份登录到系统; 2、如果MySQL服务器正在运行,停止它。       如果是作为Windows服务运行的服务器,进入服务管理器:开始菜单->控制面板->管理工具->服务       如果服务器不是作为服务而运行的,可能需要使用任务管理器来强制停止它。 3、创建1个文本文件,并将下述命令置于单一行中:       SET PASSWORD FOR 'root'@'localhost' = PASSWORD('MyNewPassword');       用任意名称保存该文件。在本例中,该文件为C:mysql-init.txt。 4、进入DOS命令提示:开始菜单->运行-> cmd       假定你已将MySQL安装到C:mysql。如果你将MySQL安装到了另一位置,请对下述命令进行相应的调整。       在DOS命令提示符下,执行命令:             C:> C:mysqlbinmysqld-nt --init-file=C:mysql-init.txt       在服务器启动时,执行由“--init-file”选项(作用:在启动时从指定的文件中读取SQL命令)命名的文件的内容,更改根用户密码。当服务器成功启动后,应删除C:mysql-init.txt。 5、停止MySQL服务器,然后在正常模式下重启它。如果以服务方式运行服务器,应从Windows服务窗口启动它。如果以手动方式启动了服务器,能够像正常情形下一样使用命令。 附: 其他方法 方法一:  
# /etc/init.d/mysql stop  
# mysqld_safe --user=mysql --skip-grant-tables --skip-networking &  
# mysql -u root mysql  
mysql> UPDATE user SET Password=PASSWORD(’newpassword’) where USER=’root’;  
mysql> FLUSH PRIVILEGES;  
mysql> quit  
# /etc/init.d/mysql restart  
# mysql -uroot -p  
Enter password: <输入新设的密码newpassword>  
mysql>  
方法二:  
直接使用/etc/mysql/debian.cnf文件中[client]节提供的用户名和密码:  
# mysql -udebian-sys-maint -p  
Enter password: <输入[client]节的密码>  
mysql> UPDATE user SET Password=PASSWORD(’newpassword’) where USER=’root’;  
mysql> FLUSH PRIVILEGES;  
mysql> quit  
# mysql -uroot -p  
Enter password: <输入新设的密码newpassword>  
mysql>  

内容来自: 脚本之家 www.jb51.net  

另一个方法
Windows:

  1. 管理员登陆系统,停止mysql服务或者结束mysqld-nt进程
  2. 进入命令行,来到mysql的安装目录.假设安装目录为 d:mysql , CMD进入命令行
  3. 运行 d:mysqlbinmysqld-nt --skip-grant-tables 启动mysql,关闭权限的检查
  4. 运行 d:mysqlbinmysqladmin -u root flush-privileges password "newpassword" 重设root密码
  5. 重新启动mysql服务

错误 代码 1045 Access denied for user 'root'@'localhost'(using password:YES) 解决办法是重新设置root用户密...

mysql索引必须了解的几个重要问题,mysql索引重要问题

本文讲述了mysql索引必须了解的几个重要问题。分享给大家供大家参考,具体如下:

1、索引是做什么的?

索引用于快速找出在某个列中有一特定值的行。不使用索引,MySQL必须从第1条记录开始然后读完整个表直到找出相关的行。
表越大,花费的时间越多。如果表中查询的列有一个索引,MySQL能快速到达一个位置去搜寻到数据文件的中间,没有必要看所有数据。
大多数MySQL索引(PRIMARY KEY、UNIQUE、INDEX和FULLTEXT)在B树中存储。只是空间列类型的索引使用R-树,并且MEMORY表还支持hash索引。

2、索引好复杂,我该怎么理解索引,有没一个更形象点的例子?

有,想象一下,你面前有本词典,数据就是书的正文内容,你就是那个cpu,而索引,则是书的目录

3、索引越多越好?

大多数情况下索引能大幅度提高查询效率,但:

数据的变更(增删改)都需要维护索引,因此更多的索引意味着更多的维护成本

更多的索引意味着也需要更多的空间 (一本100页的书,却有50页目录?)

过小的表,建索引可能会更慢哦 :)  (读个2页的宣传手册,你还先去找目录?)

4、索引的字段类型问题

text类型,也可建索引(需指定长度)

myisam存储引擎索引键长度综合不能超过1000字节

用来筛选的值尽量保持和索引列同样的数据类型

5、like 不能用索引?

尽量减少like,但不是绝对不可用,"xxxx%" 是可以用到索引的,

想象一下,你在看一本成语词典,目录是按成语拼音顺序建立,查询需求是,你想找以 "一"字开头的成语("一%"),和你想找包含一字的成语("%一%")

除了like,以下操作符也可用到索引:

<,<=,=,>,>=,BETWEEN,IN
<>,not in ,!=则不行

6、什么样的字段不适合建索引?

一般来说,列的值唯一性太小(如性别,类型什么的),不适合建索引(怎样叫太小?一半说来,同值的数据超过表的百分之15,那就没必要建索引了)

太长的列,可以选择只建立部分索引,(如:只取前十位做索引)

更新非常频繁的数据不适宜建索引(怎样叫非常?意会)

7、一次查询能用多个索引吗?

不能

8、多列查询该如何建索引?

一次查询只能用到一个索引,所以 首先枪毙 a,b各建索引方案
a还是b? 谁的区分度更高(同值的最少),建谁!
当然,联合索引也是个不错的方案,ab,还是ba,则同上,区分度高者,在前

9、联合索引的问题?

where a = "xxx" 可以使用 AB 联合索引
where b = "xxx" 则不可 (再想象一下,这是书的目录?)
所以,大多数情况下,有AB索引了,就可以不用在去建一个A索引了

10、哪些常见情况不能用索引?

like "%xxx"

not in , !=

对列进行函数运算的情况(如 where md5(password) = "xxxx")

WHERE index=1 OR A=10

存了数值的字符串类型字段(如手机号),查询时记得不要丢掉值的引号,否则无法用到该字段相关索引,反之则没关系

也即

select * from test where mobile = 13711112222;

可是无法用到mobile字段的索引的哦(如果mobile是char 或 varchar类型的话)

btw,千万不要尝试用int来存手机号(为什么?自己想!要不自己试试)

11、覆盖索引(Covering Indexes)拥有更高效率

索引包含了所需的全部值的话,就只select 他们,换言之,只select 需要用到的字段,如无必要,可尽量避免select *

12、NULL 的问题

NULL会导致索引形同虚设,所以在设计表结构时应避免NULL 的存在(用其他方式表达你想表达的NULL,比如 -1?)

13、如何查看索引信息,如何分析是否正确用到索引?

show index from tablename;
explain select ……;

关于explain,改天可以找个时间专门写一篇入门帖,在此之前,可以尝试 google

14、了解自己的系统,不要过早优化!

过早优化,一直是个非常讨厌而又时刻存在的问题,大多数时候就是因为不了解自己的系统,不知道自己系统真正的承载能力

比如:几千条数据的新闻表,每天几百几千次的正文搜索,大多数时候我们可以放心的去like,而不要又去建一套全文搜索什么的,毕竟cpu还是比人脑厉害太多

15、分享个小案例:

曾经有个朋友找板子,说:大师帮看看,公司网站打不开
板子笑了笑:大师可不敢当啊,待我看看再说
板子花了10分钟分析了下:中小型企业站,量不大(两三万pv每天),独立服务器,数据量不大(100M不到),应该不至于太慢
某个外包团队做的项目,年久失修,彻底改造?不现实!
于是,板子花了20分钟给可以加索引的字段都加上了索引,于是,世界安静了
朋友说:另外一个哥们说,优化至少得2w外包费,你只用30分钟,看来,大师你是当之无愧了,选个最好的餐馆吧
板子:那就来点西餐吧,常熟路地铁站肯德基等你!

16、最后:永远别忘记的关键词 sql注入

希望本文所述对大家MySQL数据库程序设计有所帮助。

本文由ca88手机版登录发布于亚洲城ca88手机版官网,转载请注明出处:Mysql性能优化方案分享,mysql索引必须了解的几个

TAG标签: ca88手机版登录
Ctrl+D 将本页面保存为书签,全面了解最新资讯,方便快捷。