MySQL主从延迟原因以及解决方案-低调大师

MySQL主从延迟原因以及解决方案

2017-04-09 687

1.MySQL数据库主从同步延迟原理。

谈到MySQL数据库主从同步延迟原理，得从mysql的数据库主从复制原理说起，mysql的主从复制都是单线程的操作(mysql5.6版本之前)，主库对所有DDL和DML产生binlog，binlog是顺序写，所以效率很高；slave的Slave_IO_Running线程会到主库取日志，效率会比较高，slave的Slave_SQL_Running线程将主库的DDL和DML操作都在slave实施。DML和DDL的IO操作是随机的，不是顺序的，因此成本会很高，还可能是slave上的其他查询产生lock争用，由于Slave_SQL_Running也是单线程的，所以一个DDL卡主了，需要执行10分钟，那么所有之后的DDL会等待这个DDL执行完才会继续执行，这就导致了延时。有朋友会问：“主库上那个相同的DDL也需要执行10分，为什么slave会延时？”，答案是master可以并发，Slave_SQL_Running线程却不可以。

2.MySQL数据库主从同步延迟是怎么产生的。

当主库的TPS并发较高时，产生的DDL数量超过slave一个sql线程所能承受的范围，那么延时就产生了，当然还有就是可能与slave的大型query语句产生了锁等待。

3.MySQL数据库主从同步延迟解决方案

最简单的减少slave同步延时的方案就是在架构上做优化，尽量让主库的DDL快速执行。还有就是主库是写，对数据安全性较高，比如sync_binlog=1，innodb_flush_log_at_trx_commit = 1 之类的设置，而slave则不需要这么高的数据安全，完全可以讲sync_binlog设置为0或者关闭binlog，innodb_flushlog也可以设置为0来提高sql的执行效率。另外就是使用比主库更好的硬件设备作为slave。

4.MySQL数据库主从同步延迟产生的因素。
1. 网络延迟
2. master负载
3. slave负载
一般的做法是，使用多台slave来分摊读请求，再从这些slave中取一台专用的服务器，只作为备份用，不进行其他任何操作，就能相对最大限度地达到’实时’的要求了

另外，再介绍2个可以减少延迟的参数
–slave-net-timeout=seconds
参数含义：当slave从主数据库读取log数据失败后，等待多久重新建立连接并获取数据
slave_net_timeout单位为秒默认设置为 3600秒
| slave_net_timeout | 3600
–master-connect-retry=seconds
参数含义：当重新建立主从连接时，如果连接建立失败，间隔多久后重试。
master-connect-retry单位为秒默认设置为 60秒
通常配置以上2个参数可以减少网络问题导致的主从数据同步延迟

微信关注我们

原文链接：https://blog.51cto.com/lyanhong/1914288

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

邮件服务系列之二各代理组件及postfix的安装

上一次我们了解了邮件服务系列的基础知识，本次我们来了解一下各个代理需要的组件以及postfix的安装过程。开源MTA（邮件传输代理）三剑客： sendmail：UUCP 单体结构，所有的功能使用一个进程实现，任何进程出现风险，整个服务器受到波及，并且使用SUID，所以整个过程比较不安全，并且配置文件语法使用M4编写，难以掌握 qmail：性能较好但是后期发展失败，只用作少数企业使用 postfix：模块化设计，每一个功能使用一个模块实现，不适用M4编写；比较安全，根sendmail的兼容性好，投递效率相当于sendmail的四倍以上，因此众多的系统都使用postfix exim：来自于英国剑桥大学，语法简单，使用简易 exhcange：只能在windows安装，还可以作为异步消息协作平台。 MDA：邮件投递代理 procmail maildrop MRA：（pop3,imap4） cyrus-imap dovecot（鸽子笼） MUA（邮件用户代理） Outlook Express Foxmail 两个用于linux的软件ThunderBird , Evolution 纯文本界...

2017-04-09

918

自己不是专业的linux，平时工作中也不用linux编程，自学一些linux shell编程，忘了学，学了忘，效率不高。今天权当复习吧。想想这样一个情景吧，获取某一行的部分列值。考虑这样的输入：“root:x:0:0:root:/root:/bin/bash”，现在我们获取用户及shell信息。自己暂时想到的5种实现方式。 #!/bin/bash ############################################## #第二种实现普通循环 ############################################## line="root:x:0:0:root:/root:/bin/bash"; oldIFS=$IFS; IFS=":"; declare-icount=0; #count=0; foritemin$line; do [$count-eq0]&&user=$item if[[$count-eq6]];then shell=$item fi #letcount++ count=$[$count+1] #count=$(...

2017-04-09

758

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。