【MySQL基础入门】01 常用配置参数及优化分析

举报
嘟嘟哒 发表于 2018/01/26 12:46:31 2018/01/26
【摘要】 1. 概述 MySQL数据库使用my.cnf来进行参数配置及优化,my.cnf的路径由安装时指定。 当mysqld服务启动的时候,默认会按一定的顺序读取配置文件的,可以通过如下命令查看该顺序: # mysql --help | grep my.cnf order of preference, my.cnf, $MYSQ

1.       概述

MySQL数据库使用my.cnf来进行参数配置及优化,my.cnf的路径由安装时指定。

mysqld服务启动的时候,默认会按一定的顺序读取配置文件的,可以通过如下命令查看该顺序:

# mysql --help | grep my.cnf

                      order of preference, my.cnf, $MYSQL_TCP_PORT,

/etc/my.cnf /etc/mysql/my.cnf /usr/etc/my.cnf ~/.my.cnf

通过上述命令可以发现,系统默认是按

/etc/my.cnf-----/etc/mysql/my.cnf----/usr/local/mysql/my.cnf的顺序读取配置文件的,当有多个配置文件时,mysql会以读取到的最后一个配置文件中的参数为准。

 

2.       my.cnf结构介绍

my.cnf采用集中式的配置文件,配置文件是分块的,以 [NAME] 独立行开始,到下一个[NAME] 独立行结束属于作用于NAME指定的程序的配置。

对于里面的具体参数,需要注意:

1.在同一块[NAME]中每个参数可以重复出现,对于这种重复的参数默认排在下面的参数覆盖上面的参数

2.每个[NAME]块中的参数都是默认参数值,只有在NAME命令不带这些参数时才会生效。

 

常见的NAME如下:

[client]

所有mysql客户端程序读取的配置块,针对的是MySQL客户端(不包含mysql命令)。

[server]

所有服务端如mysqld会读取的配置块,一般不用设置,完全由[mysqld]替换。

[mysqld]

mysql服务端程序mysqldmysqld_safe读取的配置块。

[mysqldump]

mysqldump命令读取的配置文件,mysqldump用于导出数据库到dump文件.

[mysql]

mysql命令这个客户端程序的配置块

3.       常用参数介绍

MySQL的配置参数多达几百个,但是我们的my.cnf文件不会全部都配置,当未配置时,mysql会设置默认值。

在此不一一分析所有配置项,仅针对常用的配置参数来进行说明。

[client]

port = 3306 

socket = /var/lib/mysql/mysql.sock

 

[mysql]

#这个配置段设置启动MySQL服务的条件;在这种情况下,no-auto-rehash确保这个服务启动得比较快。

no-auto-rehash

 

[mysqld]

port = 3306 

socket = /var/lib/mysql/mysql.sock

#MySQL客户程序与服务器之间的本地通信指定一个套接字文件(仅适用于UNIX/Linux系统; 默认设置一般是/var/lib/mysql/mysql.sock文件)

 

basedir = /usr/local/mysql

#使用给定目录作为根目录(安装目录)

 

datadir = /data/mysql/data/

#从给定目录读取数据库文件

 

open_files_limit = 10240

#MySQL打开的文件描述符限制,默认最小1024;open_files_limit没有被配置的时候,比较max_connections*5ulimit -n的值,哪个大用哪个,

#open_file_limit被配置的时候,比较open_files_limitmax_connections*5的值,哪个大用哪个

 

event_scheduler=1

#是否在mysql启动时开启mysqlevent定时器,默认值0

 

back_log = 600 

#MYSQL暂时停止响应新请求之前,短时间内的多少个请求可以被存在堆栈中。如果系统在短时间内有很多连接,则需要增大该参数的值,该参数值指定到来的TCP/IP连接的**队列的大小。默认值80

 

max_connecti 2000 

#MySQL允许最大的进程连接数,如果经常出现Too Many Connections的错误提示,则需要增大此值。默认151

 

max_c 6000

#设置每个主机的连接请求异常中断的最大次数,当超过该次数,MYSQL服务器将禁止host的连接请求,直到mysql服务器重启或通过flush hosts命令清空此host的相关信息。默认100

 

external-locking = FALSE 

#使用–skip-external-locking MySQL选项以避免外部锁定。该选项默认开启

 

max_allowed_packet = 32M 

#设置在网络传输中一次消息传输量的最大值。系统默认值 4MB,最大值是1GB,必须设置1024的倍数。

 

#sort_buffer_size = 8M

# Sort_Buffer_Size 是一个connection级参数,在每个connectionsession)第一次需要使用这个buffer的时候,一次性分配设置的内存。

#Sort_Buffer_Size 并不是越大越好,由于是connection级的参数,过大的设置+高并发可能会耗尽系统内存资源。例如:500个连接将会消耗 500*sort_buffer_size(8M)=4G内存

#Sort_Buffer_Size 超过2KB的时候,就会使用mmap() 而不是 malloc() 来进行内存分配,导致效率降低。 系统默认2M,使用默认值即可

 

#join_buffer_size = 2M

#用于表间关联缓存的大小,和sort_buffer_size一样,该参数对应的分配内存也是每个连接独享。系统默认2M,使用默认值即可

 

thread_cache_size = 300

#默认38

# 服务器线程缓存这个值表示可以重新利用保存在缓存中线程的数量,当断开连接时如果缓存中还有空间,那么客户端的线程将被放到缓存中,如果线程重新被请求,那么请求将从缓存中读取,如果缓存中是空的或者是新的请求,那么这个线程将被重新创建,如果有很多新的线程,增加这个值可以改善系统性能.通过比较 Connections Threads_created 状态的变量,可以看到这个变量的作用。

设置规则如下:1GB 内存配置为82GB配置为163GB配置为324GB或更高内存,可配置更大。

 

thread_c 8

#系统默认为10

# 设置thread_concurrency的值的正确与否, mysql的性能影响很大, 在多个cpu(或多核)的情况下,错误设置了thread_concurrency的值, 会导致mysql不能充分利用多cpu(或多核), 出现同一时刻只能一个cpu(或核)在工作的情况。thread_concurrency应设为CPU核数的2. 比如有一个双核的CPU, 那么thread_concurrency的应该为4; 2个双核的cpu, thread_concurrency的值应为8

 

query_cache_size = 16M

#MyISAM引擎优化中,这个参数也是一个重要的优化参数。但也暴露出来一些问题。机器的内存越来越大,习惯性把参数分配的值越来越大。这个参数加大后也引发了一系列问题。我们首先分析一下 query_cache_size的工作原理:一个SELECT查询在DB中工作后,DB会把该语句缓存下来,当同样的一个SQL再次来到DB里调用时,DB在该表没发生变化的情况下把结果从缓存中返回给Client。这里有一个关建点,就是DB在利用Query_cache工作时,要求该语句涉及的表在这段时间内没有发生变更。那如果该表在发生变更时,Query_cache里的数据又怎么处理呢?首先要把Query_cache和该表相关的语句全部置为失效,然后在写入更新。那么如果Query_cache非常大,该表的查询结构又比较多,查询语句失效也慢,一个更新或是Insert就会很慢,这样看到的就是Update或是Insert怎么这么慢了。所以在数据库写入量或是更新量也比较大的系统,该参数不适合分配过大。而且在高并发,写入量大的系统,建议把该功能禁掉

 

query_cache_limit = 4M 

#指定单个查询能够使用的缓冲区大小,缺省为1M

 

query_cache_min_res_unit = 2k 

#默认是4KB,设置值大对大数据查询有好处,但如果你的查询都是小数据查询,就容易造成内存碎片和浪费

#查询缓存碎片率 = Qcache_free_blocks / Qcache_total_blocks * 100%

#如果查询缓存碎片率超过20%,可以用FLUSH QUERY CACHE整理缓存碎片,或者试试减小query_cache_min_res_unit,如果你的查询都是小数据量的话。

#查询缓存利用率 = (query_cache_size Qcache_free_memory) / query_cache_size * 100%

#查询缓存利用率在25%以下的话说明query_cache_size设置的过大,可适当减小;查询缓存利用率在80%以上而且Qcache_lowmem_prunes> 50的话说明query_cache_size可能有点小,要不就是碎片太多。

#查询缓存命中率 = (Qcache_hits Qcache_inserts) / Qcache_hits * 100%

 

#default-storage-engine = MyISAM

#default_table_type = InnoDB #开启失败

 

#thread_stack = 192K 

#设置MYSQL每个线程的堆栈大小,默认值足够大,可满足普通操作。可设置范围为128K4GB,默认为256KB,使用默认观察

 

transaction_isolati READ-COMMITTED

# 设定默认的事务隔离级别.可用的级别如下:READ UNCOMMITTED-读未提交 READ COMMITTE-读已提交 REPEATABLE READ -可重复读 SERIALIZABLE -串行

 

tmp_table_size = 256M 

# tmp_table_size 的默认大小是 32M。如果一张临时表超出该大小,MySQL产生一个 The table tbl_name is full 形式的错误,如果你做很多高级 GROUP BY 查询,增加 tmp_table_size 值。如果超过该值,则会将临时表写入磁盘。

max_heap_table_size = 256M

 

expire_logs_days = 7

key_buffer_size = 256M

#批定用于索引的缓冲区大小,增加它可以得到更好的索引处理性能,对于内存在4GB左右的服务器来说,该参数可设置为256MB384MB

 

read_buffer_size = 8M

#默认128K

# MySql读入缓冲区大小。对表进行顺序扫描的请求将分配一个读入缓冲区,MySql会为它分配一段内存缓冲区。read_buffer_size变量控制这一缓冲区的大小。如果对表的顺序扫描请求非常频繁,并且你认为频繁扫描进行得太慢,可以通过增加该变量值以及内存缓冲区大小提高其性能。和sort_buffer_size一样,该参数对应的分配内存也是每个连接独享。

 

read_rnd_buffer_size = 32M

# MySql的随机读(查询操作)缓冲区大小。当按任意顺序读取行时(例如,按照排序顺序),将分配一个随机读缓存区。进行排序查询时,MySql会首先扫描一遍该缓冲,以避免磁盘搜索,提高查询速度,如果需要排序大量数据,可适当调高该值。但MySql会为每个客户连接发放该缓冲空间,所以应尽量适当设置该值,以避免内存开销过大。

 

bulk_insert_buffer_size = 64M

#批量插入数据缓存大小,可以有效提高插入效率,默认为8M

 

innodb_buffer_pool_size = 2048M  

# 这对Innodb表来说非常重要。Innodb相比MyISAM表对缓冲更为敏感。MyISAM可以在默认的 key_buffer_size 设置下运行的可以,然而Innodb在默认的 innodb_buffer_pool_size 设置下却跟蜗牛似的。由于Innodb把数据和索引都缓存起来,无需留给操作系统太多的内存,因此如果只需要用Innodb的话则可以设置它高达 70-80% 的可用内存。一些应用于 key_buffer的规则有 如果你的数据量不大,并且不会暴增,那么无需把 innodb_buffer_pool_size 设置的太大了

 

innodb_data_file_path = ibdata1:10M:autoextend

#表空间文件 重要数据

 

#innodb_thread_c0 

#参数的含义是: InnoDB内部的并发线程数.默认值0,不限制
可以动态修改
具体解析: InnoDB 试图保持InnoDB内部的并发操作系统的线程数少于innodb_thread_concurrency设置的值,如果innodb并发线程数快要到达innodb_thread_cx,其他的innodb线程会被设置为等待状态,队列的算法是FIFO;处于等待拿锁状态的线程数,不会被计算入正在执行的并发线程数

 

innodb_flush_log_at_trx_commit = 1 

#参数解释:

0log buffer将每秒一次地写入log file中,并且log fileflush(刷到磁盘)操作同时进行。该模式下在事务提交的时候,不会主动触发写入磁盘的操作。

1:每次事务提交时MySQL都会把log buffer的数据写入log file,并且flush(刷到磁盘)中去,该模式为系统默认。

2:每次事务提交时MySQL都会把log buffer的数据写入log file,但是flush(刷到磁盘)操作并不会同时进行。该模式下,MySQL会每秒执行一次 flush(刷到磁盘)操作。

 

innodb_log_buffer_size = 16M

#此参数确定些日志文件所用的内存大小,以M为单位,默认8M。缓冲区更大能提高性能,但意外的故障将会丢失数据.

 

innodb_log_file_size = 1G

#此参数确定数据日志文件的大小,默认48M,更大的设置可以提高性能,但也会增加恢复故障数据库所需的时间

 

innodb_log_files_in_group = 5

#为提高性能,MySQL可以以循环方式将日志文件写到多个文件。

 

#innodb_max_dirty_pages_pct = 90

#推荐阅读 http://www.taobaodba.com/html/221_innodb_max_dirty_pages_pct_checkpoint.html

# Buffer_PoolDirty_Page所占的数量,直接影响InnoDB的关闭时间。参数innodb_max_dirty_pages_pct 可以直接控制了Dirty_PageBuffer_Pool中所占的比率,而且幸运的是innodb_max_dirty_pages_pct是可以动态改变的。所以,在关闭InnoDB之前先将innodb_max_dirty_pages_pct调小,强制数据块Flush一段时间,则能够大大缩短 MySQL关闭的时间。

 

innodb_lock_wait_timeout = 120 

#默认为50

# InnoDB 有其内置的死锁检测机制,能导致未完成的事务回滚。但是,如果结合InnoDB使用MyISAMlock tables 语句或第三方事务引擎,InnoDB无法识别死锁。为消除这种可能性,可以将innodb_lock_wait_timeout设置为一个整数值,指示 MySQL在允许其他事务修改那些最终受事务回滚的数据之前要等待多长时间(秒数)

 

innodb_file_per_table = 0 

#默认为No

#独享表空间(关闭)

 

[mysqldump]

quick

max_allowed_packet = 64M

 

[mysql]

no-auto-rehash

# Remove the next comment character if you are not familiar with SQL

#safe-updates

 

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。