網(wǎng)站性能檢測(cè)評(píng)分
注:本網(wǎng)站頁(yè)面html檢測(cè)工具掃描網(wǎng)站中存在的基本問(wèn)題,僅供參考。
可用平臺(tái)
破解世界性技術(shù)難題! GTS讓分布式事務(wù)簡(jiǎn)單高效 互聯(lián)網(wǎng)視頻課程
近日,2017云棲大會(huì)·深圳峰會(huì)如期舉行,多項(xiàng)阿里云新產(chǎn)品對(duì)外發(fā)布。在企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)分會(huì)場(chǎng),來(lái)自阿里中間件(Aliware)的技術(shù)專家及合作伙伴,為現(xiàn)場(chǎng)參會(huì)嘉賓帶來(lái)最新的傳統(tǒng)IT架構(gòu)到企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)跨越式升級(jí)、實(shí)現(xiàn)互聯(lián)網(wǎng)轉(zhuǎn)型的產(chǎn)品及解決方案。其中高級(jí)技術(shù)專家姜宇在分享中帶來(lái)的Aliware新產(chǎn)品—全局事務(wù)服務(wù)(GlobalTransactionService,簡(jiǎn)稱GTS),在分布式事務(wù)處理上帶來(lái)的高性能和技術(shù)創(chuàng)新令到場(chǎng)參會(huì)的各路技術(shù)專家眼前一亮。Aliware新成員—全局事務(wù)服務(wù)GTS技術(shù)分享現(xiàn)場(chǎng)分布式事務(wù)背景OLTP領(lǐng)域中很多業(yè)務(wù)場(chǎng)景都會(huì)面臨事務(wù)一致性的需求,傳統(tǒng)業(yè)務(wù)系統(tǒng)常以單體應(yīng)用形式存在,只需借助特有數(shù)據(jù)訪問(wèn)技術(shù)和框架,結(jié)合關(guān)系型數(shù)據(jù)庫(kù)自帶的事務(wù)管理機(jī)制來(lái)實(shí)現(xiàn)事務(wù)一致性的要求。而目前大型互聯(lián)網(wǎng)應(yīng)用和平臺(tái)往往是由一系列分布式系統(tǒng)構(gòu)建而成,平臺(tái)和技術(shù)架構(gòu)也是流派紛呈。尤其是微服務(wù)架構(gòu)盛行的今天,一個(gè)看似簡(jiǎn)單的功能,內(nèi)部可能需要調(diào)用多個(gè)“服務(wù)”并操作多個(gè)數(shù)據(jù)庫(kù)或分片來(lái)實(shí)現(xiàn),單一技術(shù)手段和解決方案已無(wú)法滿足這些復(fù)雜應(yīng)用場(chǎng)景。因此,分布式系統(tǒng)架構(gòu)中分布式事務(wù)是一個(gè)繞不過(guò)去的挑戰(zhàn)。什么是分布式事務(wù)?簡(jiǎn)單的說(shuō),就是一次大操作由不同小操作組成,這些小操作分布在不同服務(wù)器上,分布式事務(wù)需要保證這些小操作要么全部成功,要么全部失敗。本質(zhì)上來(lái)說(shuō),分布式事務(wù)就是為了保證不同數(shù)據(jù)庫(kù)或消息系統(tǒng)的數(shù)據(jù)一致性。分布式事務(wù)三大難題:一致性、高性能和易用性分布式系統(tǒng)的事務(wù)一致性本身是一個(gè)技術(shù)難題,沒有一種簡(jiǎn)單完美的方案能夠應(yīng)對(duì)所有場(chǎng)景,很難兼顧事務(wù)一致性,高性能與易用性。三者缺一,則適用場(chǎng)景大大受限,實(shí)用價(jià)值不高。首先是一致性:要求在各種異常情況下保證數(shù)據(jù)是強(qiáng)一致的。目前最常見的一致性解決方案是最終一致性方案,通常是結(jié)合消息中間件實(shí)現(xiàn),在互聯(lián)網(wǎng)企業(yè)中廣泛使用。最終一致性實(shí)現(xiàn)方案比較復(fù)雜,開發(fā)、運(yùn)維成本高,并且與強(qiáng)一致相比,業(yè)務(wù)上是受很多限制的。其次是高性能:目前基于XA協(xié)議的兩階段提交是最常見的分布式事務(wù)解決方案,但XA類產(chǎn)品的典型不足是性能低下,這對(duì)于互聯(lián)網(wǎng)大并發(fā)需求下的多數(shù)企業(yè)是無(wú)法接受的。國(guó)外具有幾十年歷史和技術(shù)沉淀的基于XA模型的商用分布式事務(wù)產(chǎn)品,在相同軟硬件條件下,開啟分布式事務(wù)后吞吐經(jīng)常有數(shù)量級(jí)的下降。第三是易用性:為了滿足一致性和高性能要求,出現(xiàn)了一些特定場(chǎng)景下的分布式事務(wù)方案,但通常會(huì)限制用戶用法,對(duì)業(yè)務(wù)侵入性強(qiáng),無(wú)法做到簡(jiǎn)單易用,帶來(lái)更多開發(fā)成本。世界級(jí)應(yīng)用場(chǎng)景,催生世界級(jí)分布式事務(wù)解決方案早期的阿里巴巴集團(tuán)隨著業(yè)務(wù)高速發(fā)展,內(nèi)部不斷涌現(xiàn)各種典型的分布式事務(wù)需求,比如阿里內(nèi)部廣泛使用的TDDL分庫(kù)分表所帶來(lái)的分庫(kù)間數(shù)據(jù)不一致問(wèn)題,HSF服務(wù)化后所帶來(lái)的服務(wù)鏈路上數(shù)據(jù)不一致問(wèn)題等。在這個(gè)過(guò)程中,各業(yè)務(wù)技術(shù)團(tuán)隊(duì)利用現(xiàn)有中間件技術(shù)手段實(shí)現(xiàn)分布式事務(wù)處理,但這些手段都較為復(fù)雜,工作量大,對(duì)應(yīng)用侵入嚴(yán)重,有些適用場(chǎng)景還有限制。2014年5月開始,阿里中間件(Aliware)內(nèi)部命名為TXC的分布式事務(wù)中間件開始研發(fā),同年10月1.0版本發(fā)布,分布式事務(wù)功能已經(jīng)具備,但性能還有局限,只適合于吞吐量較小的場(chǎng)景;2015年12月,TXC2.0版本發(fā)布,相比1.0版本性能提升10倍以上,在阿里內(nèi)部多條業(yè)務(wù)線得到部署。通過(guò)部署TXC,應(yīng)用只需極少的代碼改造和配置,即可享受分布式事務(wù)帶來(lái)的便利。TXC作為阿里內(nèi)部為解決分布式數(shù)據(jù)強(qiáng)一致性問(wèn)題而研發(fā)的分布式事務(wù)中間件,徹底解決了分布式事務(wù)數(shù)據(jù)一致性的問(wèn)題,簡(jiǎn)單易用,先后在淘寶,菜鳥,淘票票和村淘等多個(gè)業(yè)務(wù)的核心系統(tǒng)上得到部署和驗(yàn)證。順應(yīng)云時(shí)代潮流,GTS應(yīng)運(yùn)而生從2016年年中開始,在阿里內(nèi)部一直接受錘煉的分布式事務(wù)中間件TXC在2.0版本后,隨著阿里中間件上云熱潮,開始通過(guò)專有云輸出,并得到了市場(chǎng)極大認(rèn)可,適用場(chǎng)景得到進(jìn)一步拓展,全面涵蓋電商、物流、金融、零售、政企、游戲、文娛等領(lǐng)域。2017年2月,TXC2.0通過(guò)阿里云對(duì)外公測(cè),外部改名為全局事務(wù)服務(wù)(GlobalTransactionService,簡(jiǎn)稱GTS)。GTS總體架構(gòu)圖在整體架構(gòu)方面,GTS由三個(gè)組件組成:客戶端(GTS-Client),資源管理器(RM),事務(wù)協(xié)調(diào)器(GTS-Server)??蛻舳伺c事務(wù)協(xié)調(diào)器間,資源管理器與事務(wù)協(xié)調(diào)器間都是通過(guò)GTS分布式事務(wù)協(xié)議進(jìn)行通信??蛻舳素?fù)責(zé)界定事務(wù)邊界,開啟/提交/回滾全局事務(wù),資源管理器負(fù)責(zé)管理資源,支持的資源包括:DRDS,Oracle,MySQL,RDS,PostgreSQL,H2,MQ,后續(xù)計(jì)劃根據(jù)實(shí)際業(yè)務(wù)需求支持更多類型資源。事務(wù)協(xié)調(diào)器,也就是GTS服務(wù)器,是分布式事務(wù)處理的大腦,負(fù)責(zé)協(xié)調(diào)整個(gè)事務(wù)過(guò)程。GTS事務(wù)通過(guò)RPC框架和消息中間件進(jìn)行事務(wù)傳遞,把整個(gè)業(yè)務(wù)調(diào)用鏈路或者消息鏈路串成一個(gè)分布式事務(wù),極大簡(jiǎn)化應(yīng)用開發(fā)。在高可用方面,GTS支持同城容災(zāi)與兩地三中心容災(zāi),可保證各種異常情況下的數(shù)據(jù)一致。在易用性方面,GTS對(duì)業(yè)務(wù)無(wú)侵入,真正做到業(yè)務(wù)與事務(wù)分離,開發(fā)者可以集中精力于業(yè)務(wù)本身。在技術(shù)創(chuàng)新方面,GTS也走在了行業(yè)前沿。項(xiàng)目負(fù)責(zé)人阿里高級(jí)技術(shù)專家姜宇(花名于皋)擁有13項(xiàng)分布式事務(wù)的核心技術(shù)專利,研發(fā)團(tuán)隊(duì)的技術(shù)專家張松樹也有3篇專利。通過(guò)大量的專利技術(shù),精妙的算法,與精巧的分布式事務(wù)私有協(xié)議,GTS取得了超強(qiáng)的性能。另外,在部分嚴(yán)苛的行業(yè)應(yīng)用場(chǎng)景,比如金融用戶的資管項(xiàng)目分布式事務(wù)場(chǎng)景下,GTS也經(jīng)歷了嚴(yán)格的測(cè)試,按照用戶要求順利完成功能性、穩(wěn)定性和性能測(cè)試。下圖是一個(gè)典型性能測(cè)試場(chǎng)景數(shù)據(jù),從實(shí)測(cè)數(shù)據(jù)可以看出,開啟GTS(TXC)分布式事務(wù)后性能下降不明顯。目前GTS已經(jīng)在資金業(yè)務(wù)上有實(shí)際應(yīng)用,線上大量真實(shí)數(shù)據(jù)驗(yàn)證了GTS的高效可靠。GTS典型性能測(cè)試場(chǎng)景數(shù)據(jù)性能優(yōu)異,業(yè)務(wù)場(chǎng)景廣泛作為新一代企業(yè)級(jí)分布式事務(wù)服務(wù)產(chǎn)品,全局事務(wù)服務(wù)GTS兼顧了事務(wù)一致性,高性能與易用性。在滿足事務(wù)ACID的前提下,普通配置的單服務(wù)器就可以達(dá)到15000TPS以上的超強(qiáng)性能(兩個(gè)小時(shí)內(nèi)完成1億多筆業(yè)務(wù)),3臺(tái)8核16G內(nèi)存虛機(jī)組成的服務(wù)器集群可以支撐1萬(wàn)TPS以上的分布式事務(wù),與同類產(chǎn)品相比,性能優(yōu)勢(shì)明顯。另外簡(jiǎn)單易用對(duì)業(yè)務(wù)無(wú)侵入,為廣大企業(yè)大幅降低開發(fā)成本,業(yè)務(wù)場(chǎng)景非常廣泛:1、跨多分庫(kù)的分布式數(shù)據(jù)庫(kù)事務(wù)場(chǎng)景:關(guān)系型數(shù)據(jù)庫(kù)普遍支持事務(wù),能夠滿足事務(wù)內(nèi)的SQL要么全部成功、要么全部失敗。但客戶從單機(jī)數(shù)據(jù)庫(kù)往分布式數(shù)據(jù)庫(kù)遷移的情況下,原有的一個(gè)事務(wù)往往會(huì)被拆分為多個(gè)分庫(kù)上的事務(wù)。由于網(wǎng)絡(luò)的不可靠性,容易出現(xiàn)部分分庫(kù)上成功,部分分庫(kù)上失敗的情況。GTS結(jié)合DRDS可徹底解決了這一問(wèn)題。2、跨多數(shù)據(jù)庫(kù)的事務(wù)場(chǎng)景:復(fù)雜的業(yè)務(wù)系統(tǒng)經(jīng)常會(huì)使用多個(gè)數(shù)據(jù)庫(kù),甚至多種類型的數(shù)據(jù)庫(kù),比如企業(yè)中Oracle,MySQL和其他關(guān)系型數(shù)據(jù)庫(kù)并存的情況時(shí)有發(fā)生。業(yè)務(wù)同時(shí)操作多個(gè)數(shù)據(jù)庫(kù)的情況下,一旦發(fā)生先提交的事務(wù)成功、后提交的事務(wù)失敗,就很難解決。GTS支持各種常見關(guān)系型數(shù)據(jù)庫(kù),并提供多數(shù)據(jù)庫(kù)間的事務(wù)保證。3、跨數(shù)據(jù)庫(kù)系統(tǒng)、消息系統(tǒng)的事務(wù)場(chǎng)景:消息系統(tǒng)被廣泛地用于系統(tǒng)間解耦,一般先執(zhí)行一段業(yè)務(wù)邏輯,執(zhí)行成功會(huì)向消息系統(tǒng)發(fā)送一條消息,用于通知或觸發(fā)下游業(yè)務(wù)。這個(gè)場(chǎng)景下,如果業(yè)務(wù)邏輯執(zhí)行成功、消息發(fā)送失敗,則業(yè)務(wù)不完整;如果先發(fā)送消息,但執(zhí)行業(yè)務(wù)邏輯失敗,同樣存在問(wèn)題。GTS提供了針對(duì)消息系統(tǒng)以及常見關(guān)系型數(shù)據(jù)庫(kù)的操作入口,保證數(shù)據(jù)庫(kù)操作和發(fā)送消息要么同時(shí)成功、要么同時(shí)失敗。4、跨服務(wù)的事務(wù)場(chǎng)景:隨著業(yè)務(wù)復(fù)雜度提升,大多企業(yè)會(huì)對(duì)業(yè)務(wù)進(jìn)行服務(wù)化改造??赡艽嬖诜?wù)一操作MySQL和DRDS,服務(wù)二操作Oracle,要求兩個(gè)服務(wù)操作要么同時(shí)成功、要么同時(shí)失敗,否則會(huì)造成業(yè)務(wù)數(shù)據(jù)的不一致。GTS可以很方便地進(jìn)行跨多個(gè)服務(wù)的分布式事務(wù)。依托阿里中間件(Aliware),打造世界一流企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)平臺(tái)據(jù)GTS項(xiàng)目負(fù)責(zé)人姜宇介紹,“GTS作為一款高性能、高可靠、接入簡(jiǎn)單的分布式事務(wù)中間件產(chǎn)品,可與DRDS、RDS、Oracle、MySQL、PostgreSQL、H2等數(shù)據(jù)源,EDAS、Dubbo及多種私有RPC框架,MQ消息隊(duì)列等中間件產(chǎn)品配合使用,可輕松實(shí)現(xiàn)分布式數(shù)據(jù)庫(kù)事務(wù)、多庫(kù)事務(wù)、消息事務(wù)、服務(wù)鏈路級(jí)事務(wù)及各種組合。策略豐富,易用性和性能兼顧,將真正完善阿里云中間件產(chǎn)品線。”GTS(TXC)的研發(fā)依托于阿里中間件(Aliware)團(tuán)隊(duì),中間件技術(shù)部是阿里巴巴集團(tuán)生態(tài)系統(tǒng)的技術(shù)基石,為集團(tuán)各大業(yè)務(wù)群提供可靠、高效、易擴(kuò)展的技術(shù)基礎(chǔ)服務(wù);并在此基礎(chǔ)上打造世界一流的中間件產(chǎn)品、高可用架構(gòu)基礎(chǔ)設(shè)施和企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)平臺(tái),為全球企業(yè)和客戶提供服務(wù)。更多AliwareGTS產(chǎn)品服務(wù)和技術(shù)細(xì)節(jié),請(qǐng)?jiān)L問(wèn)官網(wǎng): 相關(guān)新聞 2016-04-19 2016-06-13 2016-10-24 2016-11-04 2017-12-29
華為云國(guó)內(nèi)首發(fā)混合云災(zāi)備解決方案 護(hù)航企業(yè)云上業(yè)務(wù)無(wú)中斷 企業(yè)視頻課程
7月24號(hào),華為云中國(guó)行第三站落地北京,華為公司副總裁、華為云BU總裁鄭葉來(lái)到會(huì)并發(fā)表致辭,華為云EI產(chǎn)品部總經(jīng)理賈永利發(fā)表主題演講,分享華為云目前整體進(jìn)展以及AI時(shí)代下華為云EI的理念和思考,并發(fā)布國(guó)內(nèi)首個(gè)完整的公有云容災(zāi)備份解決方案——華為云Multicloud混合云災(zāi)備解決方案。華為云EI產(chǎn)品部總經(jīng)理賈永利現(xiàn)場(chǎng)發(fā)布華為云Multicloud混合云災(zāi)備解決方案多云時(shí)代下的業(yè)務(wù)高可用及數(shù)據(jù)高可靠挑戰(zhàn)災(zāi)備場(chǎng)景涵蓋面廣,方案復(fù)雜,傳統(tǒng)數(shù)據(jù)中心容災(zāi)方案存在CAPEX、OPEX高昂、數(shù)據(jù)同步策略復(fù)雜、災(zāi)難恢復(fù)效果有限等問(wèn)題。同時(shí),容災(zāi)備份到單個(gè)公有云上,雖然能夠解決上述問(wèn)題,但企業(yè)依舊難以高枕無(wú)憂:?jiǎn)卧萍?jí)故障難以避免,國(guó)內(nèi)外公有云“宕機(jī)”新聞屢見不鮮。企業(yè)有必要采用多云災(zāi)備策略,以保證業(yè)務(wù)連續(xù)性及關(guān)鍵數(shù)據(jù)可靠性。Multicloud混合云災(zāi)備解決方案涵蓋跨云備份、跨云容災(zāi)以及云上容災(zāi)三大場(chǎng)景,是國(guó)內(nèi)首個(gè)完整的公有云容災(zāi)備份解決方案,為客戶提供多云以及跨云的容災(zāi)備份能力,滿足企業(yè)業(yè)務(wù)部署、數(shù)據(jù)保護(hù)和管理的綜合策略,實(shí)現(xiàn)“多云備份,云上容災(zāi)”的多重基礎(chǔ)保障,能夠有效提高企業(yè)業(yè)務(wù)連續(xù)性,保障關(guān)鍵數(shù)據(jù)安全可靠。十余年企業(yè)級(jí)容災(zāi)能力積累全面開放作為企業(yè)級(jí)容災(zāi)的踐行者,華為內(nèi)部IT災(zāi)備建設(shè)已經(jīng)歷17個(gè)年頭?,F(xiàn)在華為內(nèi)部帶業(yè)務(wù)的容災(zāi)演練,單次切換涉及系統(tǒng)500多個(gè),系統(tǒng)間集成關(guān)系復(fù)雜,切換系統(tǒng)的數(shù)據(jù)量達(dá)到十PB級(jí),單系統(tǒng)數(shù)據(jù)量最大達(dá)到百PB級(jí),整個(gè)切換過(guò)程,無(wú)任何數(shù)據(jù)丟失和不一致問(wèn)題,業(yè)務(wù)切換至容災(zāi)中心運(yùn)行期間,近2500人正常使用ERP等相關(guān)系統(tǒng),新增2000多行收入數(shù)據(jù),近13萬(wàn)人次訪問(wèn)企業(yè)BG官網(wǎng)。華為HyperMetro數(shù)據(jù)同步技術(shù),脫胎于華為IT容災(zāi)實(shí)踐,經(jīng)歷了8年的研發(fā)迭代,基于其的數(shù)據(jù)中心容災(zāi)方案已經(jīng)服務(wù)超過(guò)3000家大中企業(yè)私有云,如今華為將技術(shù)能力開放到公有云上,業(yè)界首家提供云上跨AZ的存儲(chǔ)容災(zāi)服務(wù)。此外,華為云聯(lián)合國(guó)內(nèi)外災(zāi)備領(lǐng)域?qū)I(yè)合作伙伴如Veritas、英方等,構(gòu)建完整的多云災(zāi)備生態(tài),覆蓋客戶的具體細(xì)分場(chǎng)景。創(chuàng)新服務(wù)助力企業(yè)平滑災(zāi)備上云企業(yè)傳統(tǒng)重載業(yè)務(wù)如OracleRAC數(shù)據(jù)庫(kù)、SAPERP系統(tǒng)等上云,面臨性能要求苛刻、改造困難等挑戰(zhàn)。華為云基于對(duì)大企業(yè)IT系統(tǒng)的理解,創(chuàng)新地提供以下服務(wù):l裸金屬服務(wù)器:專屬的云上物理服務(wù)器,可滿足OracleRAC技術(shù)服務(wù)條款,并為這類關(guān)鍵應(yīng)用提供卓越的計(jì)算性能以及數(shù)據(jù)安全,且可靈活申請(qǐng),按需使用,實(shí)現(xiàn)關(guān)鍵應(yīng)用平滑災(zāi)備上云;l專屬云:通過(guò)云服務(wù)提供商最高可獲得的等保4級(jí)認(rèn)證,提供計(jì)算、存儲(chǔ)資源池以及網(wǎng)絡(luò)、管控多級(jí)隔離的綜合解決方案,租戶獨(dú)享專屬資源池,滿足金融、政府、大型企業(yè)關(guān)鍵應(yīng)用系統(tǒng)、敏感數(shù)據(jù)災(zāi)備上云的性能、合規(guī)性要求。企業(yè)級(jí)服務(wù)的創(chuàng)新,使得企業(yè)重載業(yè)務(wù)能夠以最小IT改造成本容災(zāi)備份上云,幫助客戶真正實(shí)現(xiàn)云上數(shù)據(jù)安全無(wú)憂。企業(yè)之所以選擇使用云服務(wù),不僅是成本訴求,更多的是出于公司業(yè)務(wù)的發(fā)展戰(zhàn)略考慮。而不管采用何種方案,保證業(yè)務(wù)系統(tǒng)的安全性和穩(wěn)定性是不變的前提。華為云憑借十余年華為自身大規(guī)模災(zāi)備實(shí)踐經(jīng)驗(yàn),以及深耕企業(yè)級(jí)容災(zāi)市場(chǎng)的技術(shù)積累,結(jié)合基于大企業(yè)云化需求的持續(xù)創(chuàng)新,協(xié)同合作伙伴覆蓋客戶細(xì)分場(chǎng)景,為企業(yè)提供值得信賴的完整公有云災(zāi)備解決方案。