缓存架构之12:redis哨兵主备切换的数据丢失问题:异步复制、集群脑裂

正文开始

<p>https://www.jianshu.com/p/f6ceae73c7ae</p><p><br /></p><p>课程大纲</p><p>1、两种数据丢失的情况</p><p>2、解决异步复制和脑裂导致的数据丢失</p><p>------------------------------------------------------------------</p>1、两种数据丢失的情况<p>主备切换的过程,可能会导致数据丢失</p><p>(1)异步复制导致的数据丢失</p><p><br /></p><img data-original-src="//upload-images.jianshu.io/upload_images/1746103-eecd7565da20f7de.png" data-original-width="1274" data-original-height="500" data-original-format="image/png" data-original-filesize="28095" style="cursor: zoom-in;" src="//upload-images.jianshu.io/upload_images/1746103-eecd7565da20f7de.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1000" alt="" />异步复制导致的数据丢失问题 <p>因为master -> slave的复制是异步的,所以可能有部分数据还没复制到slave,master就宕机了,此时这些部分数据就丢失了</p><p>(2)脑裂导致的数据丢失</p><p><br /></p><img data-original-src="//upload-images.jianshu.io/upload_images/1746103-9228839927dd74e6.png" data-original-width="1274" data-original-height="500" data-original-format="image/png" data-original-filesize="30027" style="cursor: zoom-in;" src="//upload-images.jianshu.io/upload_images/1746103-9228839927dd74e6.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1000" alt="" />集群脑裂导致的数据丢失问题 <p>脑裂,也就是说,某个master所在机器突然脱离了正常的网络,跟其他slave机器不能连接,但是实际上master还运行着</p><p>此时哨兵可能就会认为master宕机了,然后开启选举,将其他slave切换成了master</p><p>这个时候,集群里就会有两个master,也就是所谓的脑裂</p><p>此时虽然某个slave被切换成了master,但是可能client还没来得及切换到新的master,还继续写向旧master的数据可能也丢失了</p><p>因此旧master再次恢复的时候,会被作为一个slave挂到新的master上去,自己的数据会清空,重新从新的master复制数据</p><p>------------------------------------------------------------------</p>2、解决异步复制和脑裂导致的数据丢失<p>min-slaves-to-write 1</p><p>min-slaves-max-lag 10</p><p>要求至少有1个slave,数据复制和同步的延迟不能超过10秒</p><p>如果说一旦所有的slave,数据复制和同步的延迟都超过了10秒钟,那么这个时候,master就不会再接收任何请求了</p><p>上面两个配置可以减少异步复制和脑裂导致的数据丢失</p><p>(1)减少异步复制的数据丢失</p><p><br /></p><img data-original-src="//upload-images.jianshu.io/upload_images/1746103-fb3b27cab68dfd4f.png" data-original-width="1274" data-original-height="500" data-original-format="image/png" data-original-filesize="35750" style="cursor: zoom-in;" src="//upload-images.jianshu.io/upload_images/1746103-fb3b27cab68dfd4f.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1000" alt="" />异步复制导致数据丢失如何降低损失 <p>有了min-slaves-max-lag这个配置,就可以确保说,一旦slave复制数据和ack延时太长,就认为可能master宕机后损失的数据太多了,那么就拒绝写请求,这样可以把master宕机时由于部分数据未同步到slave导致的数据丢失降低的可控范围内</p><p>(2)减少脑裂的数据丢失</p><p><br /></p><img data-original-src="//upload-images.jianshu.io/upload_images/1746103-f221409ad65b6b0f.png" data-original-width="1274" data-original-height="500" data-original-format="image/png" data-original-filesize="20811" style="cursor: zoom-in;" src="//upload-images.jianshu.io/upload_images/1746103-f221409ad65b6b0f.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1000" alt="" />脑裂导致数据丢失的问题如何降低损失 <p>如果一个master出现了脑裂,跟其他slave丢了连接,那么上面两个配置可以确保说,如果不能继续给指定数量的slave发送数据,而且slave超过10秒没有给自己ack消息,那么就直接拒绝客户端的写请求</p><p>这样脑裂后的旧master就不会接受client的新数据,也就避免了数据丢失</p><p>上面的配置就确保了,如果跟任何一个slave丢了连接,在10秒后发现没有slave给自己ack,那么就拒绝新的写请求</p><p>因此在脑裂场景下,最多就丢失10秒的数据</p><br /><br />作者:踏雪无痕722<br />链接:https://www.jianshu.com/p/f6ceae73c7ae<br />來源:简书<br />简书著作权归作者所有,任何形式的转载都请联系作者获得授权并注明出处。<br />

正文结束

PHP接口(interface)和抽象类(abstract) smarty模板忽略编译内容