mysql5.7多主一从,从机调优

多主一从架构见前面文章,本文略。

同步了三个库到一台从机后,发现有两个库延时特别严重,且与主库延迟时间越拉越长,查看延迟时间,用show slave status;看Seconds_Behind_Master的值。

为了查找原因,准备开启慢日志,发现mysql从5.6开始慢日志配置项就改了,新的配置项有这么几个:

long_query_time=2
slow_query_log = 1
slow_query_log_file=/xx/xx/slow.log

配置好重启后,发现slow.log是生成了,但是等了一段时间后,没有记录到一条慢sql,通过show processlist发现慢sql多的是,就是无记录,暂未解决这个问题。

没办法,只好用show processlist人工检查慢sql,逐条优化。

之前为了初始多台主服的数据,将导过来的从库挨个改成了myisam引擎,为了加快同步速度,又改回innodb,发现在mysql5.7版本下,innodb确实要比myisam快。

经过一段时间观察,优化了几个关键的慢sql,同步延迟终于改善

mysql5.7.10主从后续

主服mysql5.6.28,从服mysql5.7.10,其中主服是从5.5.15升级到5.6.28,升到5.6的原因上一篇已经说过了,都是uuid搞的鬼。

因为数据量庞大,用mysqldump导出sql再导入的办法不太可行,太慢,采用拷贝库文件的方法。

1、停掉主服,打包库目录和idata1,上传到从服。

2、备份从服的idata1文件,因为5.7的系统库默认引擎是innodb,不能简单覆盖idata1文件,然后再替换成从库的idata1文件。

3、从库解压主库传过来的库目录和idata1文件,重启从库,这时候系统库实际上是无法使用的,因为idata1文件被替换了。

4、将移过来的库,所有表引擎改成myisam,以释放idata1文件,然后恢复老的idata1文件,重启从服。

5、这个时候从库系统库也可以用了,移过来的库也ok了,唯一的问题是引擎全部变成myisam,这个不影响主从同步,如果是多主一从,还不能改回innodb,因为idata1文件只有一个,其他库移过来都会有冲突,也都要转成myisam引擎。

遇到的问题,datetime,timestamp等字段默认值,在mysql5.7版本里,不能设置成’0000-00-00’,必须设置成正确的时间范围,拿timestamp来说,如果时区设置是中国,最小默认时间戳是’1970-01-01 08:00:01’,注意那个1秒,少一秒都不行,所有设置了默认值,小于这个时间或者用触发器获取当前时间的,都要重新定义。

尝鲜mysql5.7.10以及多主一从

因数据统计的需要,要将多台服务器上的数据汇总到一台,mysql5.7支持多源同步,也就是多主一从设置。具体配置如下:

安装mysql5.7.10就不详述了,和5.6过程没什么区别,但是千万不要直接在5.6上升级,系统库里的很多表结构都不一样了,包括user表以及几个主从表。

主服设置,可以参考之前的文章http://www.hao535.com/archives/642,略,主服唯一的要求是至少5.6版本,原因是从服的5.7和主服通信时要取主服的uuid,之前版本只用serverid就可以了,5.6以下版本是取不到uuid的,所以至少要5.6版本才能和5.7版本做主从。

关键是从服设置,就是5.7.10版本这台,首先配置文件my.cnf

server-id=2 // 不要重复,虽然serverid不重要了,还是要设置
master_info_repository=TABLE// 包括下面的信息,默认是存文件的,多个主库放文件里会有冲突,所以必须要存表里
relay_log_info_repository=TABLE

然后就是在mysql命令行里配置连接主服的参数,这些参数会写入到上面配置文件里指定的表里

change master to master_host=’主服ip’, master_user=’主服同步账号’, master_password=’同步账号密码’, master_log_file=’主服同步bin文件名’, master_log_pos=主服同步bin文件的位置 for channel “一个不重复的名称”;

这里有个很关键的东西for channel “xxx”,这个就是用来设置不同的主服,给每个主服都要命名,接下来启动从服,也要指定这个名称。

启动从服

start slave for channel “xxx”

查看从服状态

show slave status for channel “xxx”

配置多个主服,只要重复执行change master to 就可以了