成人在线亚洲_国产日韩视频一区二区三区_久久久国产精品_99国内精品久久久久久久

您的位置:首頁技術(shù)文章
文章詳情頁

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

瀏覽:4日期:2022-09-30 09:44:10

不知道大家想過這個問題沒有?如果配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的,因為在數(shù)據(jù)雙活的設(shè)計方案中,這可以算是方案的核心設(shè)計思想之一。

如果主庫觸發(fā)SQL語句:

insert into test_data(name) values(‘a(chǎn)a’);

那么Master1生成binlog,推送數(shù)據(jù)變化到Master2,在Master2上面生成relay log,然后交由sql thread進行變更重放,反之也是類似的流程,整個流程可以這樣描述。

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

如果Master2消費了relay的數(shù)據(jù),然后會產(chǎn)生binlog(log_slave_updates默認開啟),這個時候產(chǎn)生的binlog會繼續(xù)推送到Master1消費,然后來來回回推送,一套insert語句就無窮無盡了,顯然這種設(shè)計是不合理的,MySQL也肯定不會這么做。

那么問題的關(guān)鍵的部分就是:Master2是否推送了先前的binlog到Master1?

a) 如果推送了,Master1是如何過濾,避免后續(xù)無限循環(huán)

b) 如果沒有推送,Master2是如何過濾的

如果要理解這個過程,我們就需要模擬測試,查看數(shù)據(jù)流轉(zhuǎn)過程中的binlog情況,可以參考這個流程。

1) Master1的binlog

2) Master2的 relay log

3) Master的binlog

很快就部署好了一套主從環(huán)境,然后添加change master to 就快速搭建好了一套測試的雙主環(huán)境。

為了盡可能看到完整的binlog事件信息,我們開啟參數(shù)binlog_rows_query_log_events

在Master1觸發(fā)語句:

insert into test_data(name) values(‘gg’);

得到的binlog事件如下,可以清楚的看到相關(guān)的SQL語句。

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

在Master2端,我們查看binlog的情況,在開啟binlog_rows_query_log_events的前提下會看到明顯少了事件:Rows_query.

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

此時需要思考的是,在這個過程中偏移量是否發(fā)生了變化,從Master1產(chǎn)生的binlog到Master的relay log,如果通過mysqlbinlog去解析,得到的偏移量情況都是一模一樣,而在Master2消費后,產(chǎn)生了相關(guān)的binlog信息。

問題的關(guān)鍵就在這里,在Maser2里面是通過Server_id來標注了數(shù)據(jù)的源頭,所以在這里就稱為整個數(shù)據(jù)流轉(zhuǎn)的終點了,也就意味著數(shù)據(jù)復(fù)制的時候是按照server_id來進行U過濾的,每個Master端只會傳送自己相關(guān)的binlog信息。

如果從這個角度來說,MySQL對于復(fù)制中的server_id如此重要的一個原因就是基于此。

而如果換一個角度,看待基于偏移量的異步復(fù)制,其實也可以得到類似的信息。

這是Master1觸發(fā)insert語句后的binlog細節(jié)。

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

這是Master2接受實時數(shù)據(jù)后的binlog細節(jié)。

MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的

其實看到這里,還存在一個問題,那就是在偏移量模式下,如果需要一個數(shù)據(jù)變更操作在Master2丟失了,那么是沒有辦法進行回溯的。

而基于GTID模式可以唯一性標識全局事務(wù),那么哪怕對這個操作進行了重復(fù)應(yīng)用,哪怕是DDL語句,操作的影響行數(shù)也是0.

我們對一個已經(jīng)執(zhí)行的操作進行再次應(yīng)用,看看MySQL是否會自動舍棄該類操作。

mysql> SET @@SESSION.GTID_NEXT= ’6fb744dd-05dd-11ea-ada7-52540043a8b5:6’;Query OK, 0 rows affected (0.00 sec)mysql> use `test`; create table test_data (id int primary key auto_increment,name varchar(30));Database changedQuery OK, 0 rows affected (0.00 sec)

查看show binlog events發(fā)現(xiàn)這個過程不會產(chǎn)生額外的binlog。

所以基于此,我們也基本明確了數(shù)據(jù)回環(huán)解決方法的一個設(shè)計思想,那就是如何讓MySQL能夠識別出那些已經(jīng)應(yīng)用的事務(wù)數(shù)據(jù),我想GTID是一個答案,而且分布式ID不用,這是MySQL內(nèi)部的處理機制,而且是MySQL能夠識別的方式。

以上就是MySQL配置了雙主,是如何避免出現(xiàn)數(shù)據(jù)回環(huán)沖突的的詳細內(nèi)容,更多關(guān)于MySQL 避免數(shù)據(jù)回環(huán)沖突的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!

標簽: MySQL