88bf必发娱乐 5

MySQL的my.cnf文件(解决5.7.88bf必发娱乐18^下没有my-default.cnf)

--  查看是否支持分布式事务
SHOW VARIABLES LIKE 'innodb_support_xa';

The server defaults are faster for transactions and fast SELECTs.

         这个参数是指:写入redo log到文件之前,redo
log的每一个block都需要加上checksum校验位,以防止apply损坏redo log。

Remove leading # to set options mainly useful for reporting servers.

5. innodb_log_compressed_pages

官网说:从5.7.18开始不在二进制包中提供my-default.cnf文件。参考:https://dev.mysql.com/doc/refman/5.7/en/binary-installation.html

  88bf必发娱乐 1

5.7.8默认为4个, Inodb后台清理工作的线程数 #innodb_purge_threads = 4

         这个参数是指:日志文件页存储压缩。系统默认是ON , 将减少redo
log的写入量。

通过设置配置参数innodb_thread_concurrency来限制并发线程的数量, #一旦执行线程的数量达到这个限制,额外的线程在被放置到对队列中之前,会睡眠数微秒, #可以通过设定参数innodb_thread_sleep_delay来配置睡眠时间 #该值默认为0,在官方doc上,对于innodb_thread_concurrency的使用,也给出了一些建议: #(1)如果一个工作负载中,并发用户线程的数量小于64,建议设置innodb_thread_concurrency=0; #(2)如果工作负载一直较为严重甚至偶尔达到顶峰,建议先设置innodb_thread_concurrency=128,

  88bf必发娱乐 2

Mysql服务的唯一编号 每个mysql服务Id需唯一

server-id = 1

  (1)是外部xa事务(支持多实例分布式事务)。

经过测试,在5.7.18版本中,使用tar.gz安装时,也就是压缩包解压出来安装这种,已经不再需要my.cnf文件也能正常运行。

-- 查看事务超时时间
SHOW VARIABLES LIKE 'innodb_lock_wait_timeout';

慢查询执行的秒数,必须达到此值可被记录

long_query_time = 8

--  所有日志参数如下
 SHOW VARIABLES LIKE 'innodb_log%';

log_bin # These are commonly set, remove the # and set as required.

    16777216.0/1024.0/1024.0=16M

commit事务时,控制写入mysql binlog日志的模式 默认为0 #innodb_flush_log_at_trx_commit和sync_binlog都为1时,mysql最为安全但性能上压力也是最大

sync_binlog = 1

####################redo
log和binlog的关系设置END############################

############################Innodb设置#####################################

         这个参数是指: redo log写前的块大小。系统默认是8192字节。

用于表的随机读取,当按照一个非索引字段排序读取时会用到, #一般在128kb ~ 256kb,用于MyISAM #read_rnd_buffer_size = 262144

  (2)是支持内部xa事务(支持binlog和redo_log之间数据一致性)。

join_buffer_size = 128M # sort_buffer_size = 2M # read_rnd_buffer_size = 2M

sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES </pre>

其实,这些项都是命令行的参数,在官网上可以从这个页面https://dev.mysql.com/doc/refman/5.7/en/option-files.html为入口,找到需要配置的项按需要进行配置。

下面这个是来自http://www.fx114.net/qa-220-164752.aspx提供的my.cnf示例:

<pre style=”margin: 0px 0px 24px; padding: 5px; font-weight: 400;
box-sizing: border-box; background-color: rgb(246, 246, 246);
font-family: “Microsoft YaHei”; font-size: 14px; line-height: 22px;
color: rgb(0, 0, 0); border: 1px dotted rgb(170, 170, 170); white-space:
pre-wrap;”>[client]
port = 3306 socket = /tmp/mysql.sock

[mysqld]
###############################基础设置#####################################

8. innodb_log_files_in_group

mysql安装根目录

basedir = /opt/mysql #mysql数据文件所在位置
datadir = /opt/mysql/data #临时目录 比如load data infile会用到
tmpdir = /tmp #设置socke文件所在目录
socket = /tmp/mysql.sock
#主要用于MyISAM存储引擎,如果多台服务器连接一个数据库则建议注释下面内容
skip-external-locking #只能用IP地址检查客户端的登录,不用主机名
skip_name_resolve = 1

如果关闭这个参数,据前辈们说可能会影响到:1是主从复制binlog与redo_log不一致,2是binlog与redo_log事务顺序不一致性。

作为从库时生效,主从复制时忽略的错误

slave_skip_errors = ddl_exist_errors
#####################redo
log和binlog的关系设置BEGIN#########################

--  查看日志缓存空间大小
 SHOW VARIABLES LIKE 'innodb_log_buffer_size';

最大错误连接数

max_connect_errors = 1000

  88bf必发娱乐 3
  也可以对当前会话进行超时设置如: set
innodb_lock_wait_timeout=1000。关于产生死锁的原因,如何查看分析死锁问题,
如何优化尽量避免死锁,请查看”mysql 开发进阶篇 锁问题系列”。

datadir = …..

  mysql
可以自动监测行锁导致的死锁并进行相应的处理,但是对于表锁导致的死锁不能自动监测,所以该参数主要用于,出现类似情况的时候等待指定的时间后回滚。系统默认值是50秒。用户可以根据业务自行设置。生产环境不推荐使用过大的
innodb_lock_wait_timeout 参数值。

设置redoLog文件所在目录, redoLog记录事务具体操作内容

innodb_log_group_home_dir = /opt/mysql/redolog/

6. innodb_log_checksums

一般设置物理存储的60% ~ 70%

innodb_buffer_pool_size = 1G #5.7.6之后默认16M
#innodb_log_buffer_size = 16777216

    这个参数是指:日志组所在的路径。

为了获取被锁定的资源最大等待时间,默认50秒,超过该时间会报如下错误: # ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction

innodb_lock_wait_timeout = 30

      
这个参数是指:该变量控制日志文件数。默认值为3。日志是以顺序的方式写入。结合innodb_buffer_pool_size设置其大小。一般不用设置。

以上的详细说明可以参考官方解释:https://dev.mysql.com/doc/refman/5.7/en/option-files.html

2. innodb_support_xa

<colgroup style=”box-sizing: border-box; padding: 0px;”><col
style=”box-sizing: border-box; padding: 0px;”><col
style=”box-sizing: border-box; padding: 0px;”></colgroup>

3. innodb _log_buffer_size

basedir = …..

4. innodb_log_file_size
  这个参数是一个日志组(log
group)中每个日志文件的大小,也叫事务日志文件大小。此参数在高写入负载尤其是大数据集的情况下很重要.这个值越大则性能相对越高,但副作用是当系统发生灾难时恢复时间会加大。系统默认是48M。
  (1)
小日志文件使写入速度更慢,崩溃恢复速度更快。原因是由于事务日志相当于一个写缓冲,而小日志文件会很快的被写满,这时候就需要频繁地刷新到硬盘,速度就慢了。如果产生大量的写操作,会增加checkpoint写的次数,如果不能足够快地刷新数据,那么写性能将会降低,。相反文件空间大,在刷新操作发生之前给你足够的空间来使用。
  (2) 大日志文件使写入更快,崩溃恢复速度更慢。

socket = …..

9. innodb_log_group_home_dir

一般数据库中没什么大的事务,设成1~2M,默认32kb

binlog_cache_size = 524288

########################用户进程分配到的内存设置END############################

  88bf必发娱乐 4

服务端口号 默认3306

port = 3306

      
这个参数是指日志缓存的大小。默认的设置在中等强度写入负载以及较短事务的情况下,一般都可以满足服务器的性能要求。如果存在更新操作峰值或者负载较大,就应该考虑加大它的值。
如果值设置太高,可能会浪费内存,因为它每秒都会刷新一次,因此无需设置超过1秒所需的内存空间(理解是每1秒刷新后,日志缓存会清空)。通常设置为8~16MB就足够了。系统默认是16M。

my.cnf文件就是把在命令行上启动MySQL时后面的参数用cnf文件配置好,那么下载启动时就不再需要在命令上加如参数。

7.  innodb_log_write_ahead_size

这个my.cnf文件可以是自定义位置,也可以使用如下默认的位置,只要放在默认位置,MySQL自动识别(通过deb或者APT源安装的,初始位置在下方列表):

        
通过该参数设置,是否支持分布式事务。默认值是ON或者1,表示支持分布式事务。
   分布事事务分两类:

(步骤1) prepare dml相关的SQL操作,然后将redo log buff中的缓存持久化到磁盘 #(步骤2)如果前面prepare成功,那么再继续将事务日志持久化到binlog #(步骤3)如果前面成功,那么在redo log里面写上一个commit记录 #当innodb_flush_log_at_trx_commit和sync_binlog都为1时是最安全的, #在mysqld服务崩溃或者服务器主机crash的情况下,binary log只有可能丢失最多一个语句或者一个事务。 #但是都设置为1时会导致频繁的io操作,因此该模式也是最慢的一种方式。 #当innodb_flush_log_at_trx_commit设置为0,mysqld进程的崩溃会导致上一秒钟所有事务数据的丢失。 #当innodb_flush_log_at_trx_commit设置为2,只有在操作系统崩溃或者系统掉电的情况下,上一秒钟所有事务数据才可能丢失。 #commit事务时,控制redo log buff持久化磁盘的模式 默认为1

innodb_flush_log_at_trx_commit = 2

1. innodb_lock_wait_timeout

检索的行数必须达到此值才可被记为慢查询

min_examined_row_limit = 100

--  查看每个日志文件的大小
 SHOW VARIABLES LIKE 'innodb_log_file_size';

总之,无论是使用APT源安装还是deb包安装,或者二进制(压缩包tar.gz)包安装的,都可以通过my.cnf文件进行配置来达到MySQL的启动配置及调优。

  88bf必发娱乐 5
  268435456.0/1024.0/1024.0=256M

port = …..

强所有发生的死锁错误信息记录到error.log中,之前通过命令行只能查看最近一次死锁信息

innodb_print_all_deadlocks = 1

############################其他设置########################################
[mysqldump]
quick
max_allowed_packet = 128M

[mysql]
no-auto-rehash

[myisamchk]
key_buffer_size = 20M
sort_buffer_size = 256k
read_buffer = 2M
write_buffer = 2M

[mysqlhotcopy]
interactive-timeout

[mysqld_safe] #增加每个进程的可打开文件数量
open-files-limit = 28192</pre>

提示:上述的文件不建议全部拷贝使用,当需要哪块时单独复制是最好的,因为每台服务器的需求都不一样。

注意:官方建议二进制文件是防止在/usr/local下,my.cnf当然可以放在默认位置之后,还可以直接指定在二进制文件夹中等。然后现在新版的Linux是建议第三方软件放在/opt下,我觉都可以,建议按照官网的来配置最好,方便排查问题。

调整buffer pool中最近使用的页读取并dump的百分比,通过设置该参数可以减少转储的page数

innodb_buffer_pool_dump_pct = 40

最大连接数

max_connections = 400

TIMESTAMP如果没有显示声明NOT NULL,允许NULL值

explicit_defaults_for_timestamp = true
#SQL数据包发送的大小,如果有BLOB对象建议修改成1G
max_allowed_packet = 128M
#MySQL连接闲置超过一定时间后(单位:秒)将会被强行关闭
#MySQL默认的wait_timeout 值为8个小时,
interactive_timeout参数需要同时配置才能生效
interactive_timeout = 1800 wait_timeout = 1800

MySql5.7官方建议尽量设置的大些,可以接近innodb_buffer_pool_size的大小 #之前设置该值较大时可能导致mysql宕机恢复时间过长,现在恢复已经加快很多了 #该值减少脏数据刷新到磁盘的频次 #最大值innodb_log_file_size * innodb_log_files_in_group <= 512GB,单文件<=256GB

innodb_log_file_size = 1024M #设置undoLog文件所占空间可以回收
#5.7之前的MySql的undoLog文件一直增大无法回收
innodb_undo_log_truncate = 1 innodb_undo_tablespaces = 3
innodb_undo_logs = 128

Adjust sizes as needed, experiment to find the optimal values.

innodb_buffer_pool_size = 128M # Remove leading # to turn on a very important data integrity option: logging # changes to the binary log between backups.

禁用mysql的缓存查询结果集功能 #后期根据业务情况测试决定是否开启 #大部分情况下关闭下面两项

query_cache_size = 0 query_cache_type = 0

#####################用户进程分配到的内存设置BEGIN#############################

server_id = …..

文件名 目的
/etc/my.cnf 全局选项
/etc/mysql/my.cnf 全局选项
“SYSCONFDIR/my.cnf 全局选项
$MYSQL_HOME/my.cnf 服务器特定选项(仅限服务器)
defaults-extra-file 指定的文件 --defaults-extra-file,如果有的话
~/.my.cnf 用户特定选项
~/.mylogin.cnf 用户特定的登录路径选项(仅限客户端)

提高刷新脏页数量和合并插入数量,改善磁盘I/O处理能力 #默认值200(单位:页) #可根据磁盘近期的IOPS确定该值

innodb_io_capacity = 500

在innodb_log_group_home_dir中的redoLog文件数, redoLog文件内容是循环覆盖写入。

innodb_log_files_in_group = 3

设置undoLog文件所在目录, undoLog用于事务回滚操作

innodb_undo_directory = /opt/mysql/undolog/

5.7.7默认开启该参数 控制单列索引长度最大达到3072 #innodb_large_prefix = 1

数据库错误日志文件

log_error = error.log #慢查询sql日志设置
slow_query_log = 1 slow_query_log_file = slow.log
#检查未使用到索引的sql
log_queries_not_using_indexes = 1

作为从库时生效,从库复制中如何有慢sql也将被记录

log_slow_slave_statements = 1

开启mysql binlog功能

log-bin=mysql-bin #binlog记录内容的方式,记录被操作的每一行
binlog_format = ROW #对于binlog_format =
ROW模式时,减少记录日志的内容,只记录受影响的列
binlog_row_image = minimal #master status and connection
information输出到表mysql.slave_master_info中
master_info_repository = TABLE #the slave‘s position in the relay
logs输出到表mysql.slave_relay_log_info中
relay_log_info_repository = TABLE
#作为从库时生效,想进行级联复制,则需要此参数
log_slave_updates #作为从库时生效,中继日志relay-log可以自我修复
relay_log_recovery = 1

每个session将会分配参数设置的内存大小 #用于表的顺序扫描,读出的数据暂存于read_buffer_size中,当buff满时或读完,将数据返回上层调用者 #一般在128kb ~ 256kb,用于MyISAM #read_buffer_size = 131072

在MySQL暂时停止响应新请求之前的短时间内多少个请求可以被存在堆栈中 #官方建议back_log = 50 + (max_connections / 5),封顶数为900

back_log = 130

############################日志设置##########################################

order by或group by时用到 #建议先调整为2M,后期观察调整

sort_buffer_size = 2097152

并通过不断的降低这个参数,96, 80, 64等等,直到发现能够提供最佳性能的线程数 #innodb_thread_concurrency = 0

由于在5.7.18开始,二进制包不再包含示例文件my-default.cnf,所以我从5.7.17版本中提取了样例,但是发现里面也没有太多项配置,my-default.cnf内容如下:

mysql binlog日志文件保存的过期时间,过期后自动删除

expire_logs_days = 5

############################主从复制设置#####################################

数据块的单位8k,默认是16k,16kCPU压力稍小,8k对select的吞吐量大 #innodb_page_size的参数值也影响最大索引长度,8k比16k的最大索引长度小 #innodb_page_size = 8192

<pre style=”margin: 0px 0px 24px; padding: 5px; font-weight: 400;
box-sizing: border-box; background-color: rgb(246, 246, 246);
font-family: “Microsoft YaHei”; font-size: 14px; line-height: 22px;
color: rgb(0, 0, 0); border: 1px dotted rgb(170, 170, 170); white-space:
pre-wrap;”># For advice on how to change settings please see #
http://dev.mysql.com/doc/refman/5.7/en/server-configuration-defaults.html
# *** DO NOT EDIT THIS FILE. It‘s a template which will be copied to
the # *** default location during install, and will be replaced if
you # *** upgrade to a newer version of MySQL. [mysqld] # Remove
leading # and set to the amount of RAM for the most important data #
cache in MySQL. Start at 70% of total RAM for dedicated server, else
10%.

该参数针对unix、linux,window上直接注释该参数.默认值为NULL #O_DIRECT减少操作系统级别VFS的缓存和Innodb本身的buffer缓存之间的冲突

innodb_flush_method = O_DIRECT #此格式支持压缩, 5.7.7之后为默认值
innodb_file_format = Barracuda
#CPU多核处理能力设置,假设CPU是2颗4核的,设置如下
#读多,写少可以设成2:6的比例
innodb_write_io_threads = 4 innodb_read_io_threads = 4

文件名 目的
/etc/my.cnf 全局选项
/etc/mysql/my.cnf 全局选项
“SYSCONFDIR/my.cnf 全局选项
$MYSQL_HOME/my.cnf 服务器特定选项(仅限服务器)
defaults-extra-file 指定的文件 --defaults-extra-file,如果有的话
~/.my.cnf 用户特定选项
~/.mylogin.cnf 用户特定的登录路径选项(仅限客户端)

事务隔离级别,默认为可重复读,mysql默认可重复读级别(此级别下可能参数很多间隙锁,影响性能)

transaction_isolation = READ-COMMITTED
#数据库默认字符集,主流字符集支持一些特殊表情符号(特殊表情符占用4个字节)
character-set-server = utf8mb4
#数据库字符集对应一些排序等规则,注意要和character-set-server对应
collation-server = utf8mb4_general_ci
#设置client连接mysql时的字符集,防止乱码
init_connect=‘SET NAMES utf8mb4‘
#是否对sql语句大小写敏感,1表示不敏感
lower_case_table_names = 1

内部内存临时表的最大值 ,设置成128M。 #比如大数据量的group by ,order by时可能用到临时表, #超过了这个值将写入磁盘,系统IO压力增大

tmp_table_size = 134217728 max_heap_table_size = 134217728

针对log_queries_not_using_indexes开启后,记录慢sql的频次、每分钟记录的条数

log_throttle_queries_not_using_indexes = 5