青云QingCloud 數(shù)據(jù)庫(kù)研發(fā)工程師 邰翀
此次活動(dòng)由 3306π 社區(qū)發(fā)起，旨在圍繞 MySQL 核心技術(shù)，將互聯(lián)網(wǎng)行業(yè)中最重要的數(shù)據(jù)化解決方案和核心技術(shù)理念帶到傳統(tǒng)行業(yè)中，構(gòu)建良好交流互動(dòng)環(huán)境，分享數(shù)據(jù)庫(kù)前沿知識(shí)。 在演講中，邰翀介紹了 MySQL 復(fù)制歷程，從最早的同構(gòu)數(shù)據(jù)庫(kù)復(fù)制，到 2013 年的增強(qiáng)半同步復(fù)制，再到 2017 年支持組復(fù)制（MGR），實(shí)現(xiàn)金融級(jí)別可用的數(shù)據(jù)同步方案。隨后，以青云QingCloud 為代表的各大廠商開(kāi)始研發(fā)高可用組件，如 QingCloud MySQL Plus，通過(guò)真正的強(qiáng)一致性和高可用能力，來(lái)管理 MySQL 選舉、探活，并訂正數(shù)據(jù)準(zhǔn)確性，從而達(dá)到集群數(shù)據(jù)強(qiáng)一致性、主從秒級(jí)切換、無(wú)中心化自動(dòng)選主，以及依托于云的跨區(qū)容災(zāi)能力。但 MySQL 在有了高可用能力后，雖然可通過(guò)增加只讀實(shí)例的方式來(lái)增強(qiáng) AP 能力，但是其數(shù)據(jù)結(jié)構(gòu)和分布方式?jīng)Q定了 AP 能力相對(duì)較弱。 那么，如何增強(qiáng) AP 能力呢？答案是：ClickHouse。但ClickHouse ?能否主動(dòng)同步并訂閱 MySQL 數(shù)據(jù)呢？答案是：當(dāng)然可以。青云QingCloud ClickHouse 團(tuán)隊(duì)自主研發(fā)的庫(kù)引擎——MaterializeMySQL 引擎，就很好地解決這一問(wèn)題。 邰翀闡述道：“MaterializeMySQL 是對(duì) MySQL 庫(kù)級(jí)別的映射，目前已作為實(shí)驗(yàn)特性合并到 ClickHouse 20.8 版本中。其通過(guò)消費(fèi) binlog 存儲(chǔ)到 MergeTree 的方式來(lái)訂閱 MySQL 數(shù)據(jù)，可以直接將 ClickHouse 作為一個(gè)分析實(shí)例加入到 MySQL 復(fù)制中，替代 MySQL 一部分只讀實(shí)例進(jìn)行商務(wù)分析、用戶畫(huà)像等分析業(yè)務(wù)。ClickHouse 本身在支持海量函數(shù)來(lái)提升分析能力的同時(shí)，還支持標(biāo)準(zhǔn) SQL，可以讓使用者享受到更好的體驗(yàn)。” 與其他的 ClickHouse 同步 MySQL 數(shù)據(jù)的方式相比，MaterializeMySQL 的優(yōu)勢(shì)更加明顯。邰翀認(rèn)為，MaterializeMySQL 打通了從 MySQL 到 ClickHouse 的數(shù)據(jù)傳輸通路，不僅提供了將 MySQL 數(shù)據(jù)精細(xì)化分析的能力，也為接下來(lái)的 HTAP 打下了基礎(chǔ)。 隨著萬(wàn)物互聯(lián)的快速發(fā)展，數(shù)據(jù)開(kāi)始呈現(xiàn)爆炸式增長(zhǎng)，這也促使 MySQL 的能力進(jìn)化加速。青云QingCloud 將繼續(xù)發(fā)揮自主創(chuàng)新的優(yōu)勢(shì)，為解決海量數(shù)據(jù)分析提供先進(jìn)的技術(shù)和產(chǎn)品支持，助力企業(yè)在海量數(shù)據(jù)中深度挖掘數(shù)據(jù)價(jià)值，為數(shù)字化轉(zhuǎn)型提供決策支持。
分享