狠狠操夜夜甜|人妻在线中文字幕亚洲无码不卡av|一区二区欧美亚洲|日躁夜躁狠狠躁2001|亚洲,超碰,欧美|18AV成人电影|午夜成人免费在线|婷婷激情网深爱五月|色欲综合成人在线|在线美女搞黄大片

中企動(dòng)力 > 頭條 > 擴(kuò)展框架

網(wǎng)站性能檢測(cè)評(píng)分

注:本網(wǎng)站頁面html檢測(cè)工具掃描網(wǎng)站中存在的基本問題,僅供參考。

擴(kuò)展框架

破解世界性技術(shù)難題! GTS讓分布式事務(wù)簡(jiǎn)單高效 公司視頻課程

img

糜凡陽

關(guān)注
近日,2017云棲大會(huì)·深圳峰會(huì)如期舉行,多項(xiàng)阿里云新產(chǎn)品對(duì)外發(fā)布。在企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)分會(huì)場(chǎng),來自阿里中間件(Aliware)的技術(shù)專家及合作伙伴,為現(xiàn)場(chǎng)參會(huì)嘉賓帶來最新的傳統(tǒng)IT架構(gòu)到企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)跨越式升級(jí)、實(shí)現(xiàn)互聯(lián)網(wǎng)轉(zhuǎn)型的產(chǎn)品及解決方案。其中高級(jí)技術(shù)專家姜宇在分享中帶來的Aliware新產(chǎn)品—全局事務(wù)服務(wù)(GlobalTransactionService,簡(jiǎn)稱GTS),在分布式事務(wù)處理上帶來的高性能和技術(shù)創(chuàng)新令到場(chǎng)參會(huì)的各路技術(shù)專家眼前一亮。

Aliware新成員—全局事務(wù)服務(wù)GTS技術(shù)分享現(xiàn)場(chǎng)

分布式事務(wù)背景

OLTP領(lǐng)域中很多業(yè)務(wù)場(chǎng)景都會(huì)面臨事務(wù)一致性的需求,傳統(tǒng)業(yè)務(wù)系統(tǒng)常以單體應(yīng)用形式存在,只需借助特有數(shù)據(jù)訪問技術(shù)和框架,結(jié)合關(guān)系型數(shù)據(jù)庫自帶的事務(wù)管理機(jī)制來實(shí)現(xiàn)事務(wù)一致性的要求。而目前大型互聯(lián)網(wǎng)應(yīng)用和平臺(tái)往往是由一系列分布式系統(tǒng)構(gòu)建而成,平臺(tái)和技術(shù)架構(gòu)也是流派紛呈。

尤其是微服務(wù)架構(gòu)盛行的今天,一個(gè)看似簡(jiǎn)單的功能,內(nèi)部可能需要調(diào)用多個(gè)“服務(wù)”并操作多個(gè)數(shù)據(jù)庫或分片來實(shí)現(xiàn),單一技術(shù)手段和解決方案已無法滿足這些復(fù)雜應(yīng)用場(chǎng)景。因此,分布式系統(tǒng)架構(gòu)中分布式事務(wù)是一個(gè)繞不過去的挑戰(zhàn)。什么是分布式事務(wù)?簡(jiǎn)單的說,就是一次大操作由不同小操作組成,這些小操作分布在不同服務(wù)器上,分布式事務(wù)需要保證這些小操作要么全部成功,要么全部失敗。

本質(zhì)上來說,分布式事務(wù)就是為了保證不同數(shù)據(jù)庫或消息系統(tǒng)的數(shù)據(jù)一致性。

分布式事務(wù)三大難題:一致性、高性能和易用性

分布式系統(tǒng)的事務(wù)一致性本身是一個(gè)技術(shù)難題,沒有一種簡(jiǎn)單完美的方案能夠應(yīng)對(duì)所有場(chǎng)景,很難兼顧事務(wù)一致性,高性能與易用性。三者缺一,則適用場(chǎng)景大大受限,實(shí)用價(jià)值不高。

首先是一致性:要求在各種異常情況下保證數(shù)據(jù)是強(qiáng)一致的。目前最常見的一致性解決方案是最終一致性方案,通常是結(jié)合消息中間件實(shí)現(xiàn),在互聯(lián)網(wǎng)企業(yè)中廣泛使用。最終一致性實(shí)現(xiàn)方案比較復(fù)雜,開發(fā)、運(yùn)維成本高,并且與強(qiáng)一致相比,業(yè)務(wù)上是受很多限制的。

其次是高性能:目前基于XA協(xié)議的兩階段提交是最常見的分布式事務(wù)解決方案,但XA類產(chǎn)品的典型不足是性能低下,這對(duì)于互聯(lián)網(wǎng)大并發(fā)需求下的多數(shù)企業(yè)是無法接受的。國(guó)外具有幾十年歷史和技術(shù)沉淀的基于XA模型的商用分布式事務(wù)產(chǎn)品,在相同軟硬件條件下,開啟分布式事務(wù)后吞吐經(jīng)常有數(shù)量級(jí)的下降。

第三是易用性:為了滿足一致性和高性能要求,出現(xiàn)了一些特定場(chǎng)景下的分布式事務(wù)方案,但通常會(huì)限制用戶用法,對(duì)業(yè)務(wù)侵入性強(qiáng),無法做到簡(jiǎn)單易用,帶來更多開發(fā)成本。

世界級(jí)應(yīng)用場(chǎng)景,催生世界級(jí)分布式事務(wù)解決方案

早期的阿里巴巴集團(tuán)隨著業(yè)務(wù)高速發(fā)展,內(nèi)部不斷涌現(xiàn)各種典型的分布式事務(wù)需求,比如阿里內(nèi)部廣泛使用的TDDL分庫分表所帶來的分庫間數(shù)據(jù)不一致問題,HSF服務(wù)化后所帶來的服務(wù)鏈路上數(shù)據(jù)不一致問題等。在這個(gè)過程中,各業(yè)務(wù)技術(shù)團(tuán)隊(duì)利用現(xiàn)有中間件技術(shù)手段實(shí)現(xiàn)分布式事務(wù)處理,但這些手段都較為復(fù)雜,工作量大,對(duì)應(yīng)用侵入嚴(yán)重,有些適用場(chǎng)景還有限制。

2014年5月開始,阿里中間件(Aliware)內(nèi)部命名為TXC的分布式事務(wù)中間件開始研發(fā),同年10月1.0版本發(fā)布,分布式事務(wù)功能已經(jīng)具備,但性能還有局限,只適合于吞吐量較小的場(chǎng)景;2015年12月,TXC2.0版本發(fā)布,相比1.0版本性能提升10倍以上,在阿里內(nèi)部多條業(yè)務(wù)線得到部署。

通過部署TXC,應(yīng)用只需極少的代碼改造和配置,即可享受分布式事務(wù)帶來的便利。TXC作為阿里內(nèi)部為解決分布式數(shù)據(jù)強(qiáng)一致性問題而研發(fā)的分布式事務(wù)中間件,徹底解決了分布式事務(wù)數(shù)據(jù)一致性的問題,簡(jiǎn)單易用,先后在淘寶,菜鳥,淘票票和村淘等多個(gè)業(yè)務(wù)的核心系統(tǒng)上得到部署和驗(yàn)證。

順應(yīng)云時(shí)代潮流,GTS應(yīng)運(yùn)而生

從2016年年中開始,在阿里內(nèi)部一直接受錘煉的分布式事務(wù)中間件TXC在2.0版本后,隨著阿里中間件上云熱潮,開始通過專有云輸出,并得到了市場(chǎng)極大認(rèn)可,適用場(chǎng)景得到進(jìn)一步拓展,全面涵蓋電商、物流、金融、零售、政企、游戲、文娛等領(lǐng)域。2017年2月,TXC2.0通過阿里云對(duì)外公測(cè),外部改名為全局事務(wù)服務(wù)(GlobalTransactionService,簡(jiǎn)稱GTS)。

GTS總體架構(gòu)圖

在整體架構(gòu)方面,GTS由三個(gè)組件組成:客戶端(GTS-Client),資源管理器(RM),事務(wù)協(xié)調(diào)器(GTS-Server)??蛻舳伺c事務(wù)協(xié)調(diào)器間,資源管理器與事務(wù)協(xié)調(diào)器間都是通過GTS分布式事務(wù)協(xié)議進(jìn)行通信。客戶端負(fù)責(zé)界定事務(wù)邊界,開啟/提交/回滾全局事務(wù),資源管理器負(fù)責(zé)管理資源,支持的資源包括:DRDS,Oracle,MySQL,RDS,PostgreSQL,H2,MQ,后續(xù)計(jì)劃根據(jù)實(shí)際業(yè)務(wù)需求支持更多類型資源。事務(wù)協(xié)調(diào)器,也就是GTS服務(wù)器,是分布式事務(wù)處理的大腦,負(fù)責(zé)協(xié)調(diào)整個(gè)事務(wù)過程。GTS事務(wù)通過RPC框架和消息中間件進(jìn)行事務(wù)傳遞,把整個(gè)業(yè)務(wù)調(diào)用鏈路或者消息鏈路串成一個(gè)分布式事務(wù),極大簡(jiǎn)化應(yīng)用開發(fā)。

在高可用方面,GTS支持同城容災(zāi)與兩地三中心容災(zāi),可保證各種異常情況下的數(shù)據(jù)一致。在易用性方面,GTS對(duì)業(yè)務(wù)無侵入,真正做到業(yè)務(wù)與事務(wù)分離,開發(fā)者可以集中精力于業(yè)務(wù)本身。在技術(shù)創(chuàng)新方面,GTS也走在了行業(yè)前沿。項(xiàng)目負(fù)責(zé)人阿里高級(jí)技術(shù)專家姜宇(花名于皋)擁有13項(xiàng)分布式事務(wù)的核心技術(shù)專利,研發(fā)團(tuán)隊(duì)的技術(shù)專家張松樹也有3篇專利。通過大量的專利技術(shù),精妙的算法,與精巧的分布式事務(wù)私有協(xié)議,GTS取得了超強(qiáng)的性能。

另外,在部分嚴(yán)苛的行業(yè)應(yīng)用場(chǎng)景,比如金融用戶的資管項(xiàng)目分布式事務(wù)場(chǎng)景下,GTS也經(jīng)歷了嚴(yán)格的測(cè)試,按照用戶要求順利完成功能性、穩(wěn)定性和性能測(cè)試。下圖是一個(gè)典型性能測(cè)試場(chǎng)景數(shù)據(jù),從實(shí)測(cè)數(shù)據(jù)可以看出,開啟GTS(TXC)分布式事務(wù)后性能下降不明顯。目前GTS已經(jīng)在資金業(yè)務(wù)上有實(shí)際應(yīng)用,線上大量真實(shí)數(shù)據(jù)驗(yàn)證了GTS的高效可靠。

GTS典型性能測(cè)試場(chǎng)景數(shù)據(jù)

性能優(yōu)異,業(yè)務(wù)場(chǎng)景廣泛

作為新一代企業(yè)級(jí)分布式事務(wù)服務(wù)產(chǎn)品,全局事務(wù)服務(wù)GTS兼顧了事務(wù)一致性,高性能與易用性。在滿足事務(wù)ACID的前提下,普通配置的單服務(wù)器就可以達(dá)到15000TPS以上的超強(qiáng)性能(兩個(gè)小時(shí)內(nèi)完成1億多筆業(yè)務(wù)),3臺(tái)8核16G內(nèi)存虛機(jī)組成的服務(wù)器集群可以支撐1萬TPS以上的分布式事務(wù),與同類產(chǎn)品相比,性能優(yōu)勢(shì)明顯。另外簡(jiǎn)單易用對(duì)業(yè)務(wù)無侵入,為廣大企業(yè)大幅降低開發(fā)成本,業(yè)務(wù)場(chǎng)景非常廣泛:

1、跨多分庫的分布式數(shù)據(jù)庫事務(wù)場(chǎng)景:關(guān)系型數(shù)據(jù)庫普遍支持事務(wù),能夠滿足事務(wù)內(nèi)的SQL要么全部成功、要么全部失敗。但客戶從單機(jī)數(shù)據(jù)庫往分布式數(shù)據(jù)庫遷移的情況下,原有的一個(gè)事務(wù)往往會(huì)被拆分為多個(gè)分庫上的事務(wù)。由于網(wǎng)絡(luò)的不可靠性,容易出現(xiàn)部分分庫上成功,部分分庫上失敗的情況。GTS結(jié)合DRDS可徹底解決了這一問題。

2、跨多數(shù)據(jù)庫的事務(wù)場(chǎng)景:復(fù)雜的業(yè)務(wù)系統(tǒng)經(jīng)常會(huì)使用多個(gè)數(shù)據(jù)庫,甚至多種類型的數(shù)據(jù)庫,比如企業(yè)中Oracle,MySQL和其他關(guān)系型數(shù)據(jù)庫并存的情況時(shí)有發(fā)生。業(yè)務(wù)同時(shí)操作多個(gè)數(shù)據(jù)庫的情況下,一旦發(fā)生先提交的事務(wù)成功、后提交的事務(wù)失敗,就很難解決。GTS支持各種常見關(guān)系型數(shù)據(jù)庫,并提供多數(shù)據(jù)庫間的事務(wù)保證。

3、跨數(shù)據(jù)庫系統(tǒng)、消息系統(tǒng)的事務(wù)場(chǎng)景:消息系統(tǒng)被廣泛地用于系統(tǒng)間解耦,一般先執(zhí)行一段業(yè)務(wù)邏輯,執(zhí)行成功會(huì)向消息系統(tǒng)發(fā)送一條消息,用于通知或觸發(fā)下游業(yè)務(wù)。這個(gè)場(chǎng)景下,如果業(yè)務(wù)邏輯執(zhí)行成功、消息發(fā)送失敗,則業(yè)務(wù)不完整;如果先發(fā)送消息,但執(zhí)行業(yè)務(wù)邏輯失敗,同樣存在問題。GTS提供了針對(duì)消息系統(tǒng)以及常見關(guān)系型數(shù)據(jù)庫的操作入口,保證數(shù)據(jù)庫操作和發(fā)送消息要么同時(shí)成功、要么同時(shí)失敗。

4、跨服務(wù)的事務(wù)場(chǎng)景:隨著業(yè)務(wù)復(fù)雜度提升,大多企業(yè)會(huì)對(duì)業(yè)務(wù)進(jìn)行服務(wù)化改造??赡艽嬖诜?wù)一操作MySQL和DRDS,服務(wù)二操作Oracle,要求兩個(gè)服務(wù)操作要么同時(shí)成功、要么同時(shí)失敗,否則會(huì)造成業(yè)務(wù)數(shù)據(jù)的不一致。GTS可以很方便地進(jìn)行跨多個(gè)服務(wù)的分布式事務(wù)。

依托阿里中間件(Aliware),打造世界一流企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)平臺(tái)

據(jù)GTS項(xiàng)目負(fù)責(zé)人姜宇介紹,“GTS作為一款高性能、高可靠、接入簡(jiǎn)單的分布式事務(wù)中間件產(chǎn)品,可與DRDS、RDS、Oracle、MySQL、PostgreSQL、H2等數(shù)據(jù)源,EDAS、Dubbo及多種私有RPC框架,MQ消息隊(duì)列等中間件產(chǎn)品配合使用,可輕松實(shí)現(xiàn)分布式數(shù)據(jù)庫事務(wù)、多庫事務(wù)、消息事務(wù)、服務(wù)鏈路級(jí)事務(wù)及各種組合。策略豐富,易用性和性能兼顧,將真正完善阿里云中間件產(chǎn)品線。”

GTS(TXC)的研發(fā)依托于阿里中間件(Aliware)團(tuán)隊(duì),中間件技術(shù)部是阿里巴巴集團(tuán)生態(tài)系統(tǒng)的技術(shù)基石,為集團(tuán)各大業(yè)務(wù)群提供可靠、高效、易擴(kuò)展的技術(shù)基礎(chǔ)服務(wù);并在此基礎(chǔ)上打造世界一流的中間件產(chǎn)品、高可用架構(gòu)基礎(chǔ)設(shè)施和企業(yè)級(jí)互聯(lián)網(wǎng)架構(gòu)平臺(tái),為全球企業(yè)和客戶提供服務(wù)。

更多AliwareGTS產(chǎn)品服務(wù)和技術(shù)細(xì)節(jié),請(qǐng)?jiān)L問官網(wǎng)

相關(guān)新聞

2016-04-19

2016-06-13

2016-10-24

2016-11-04

2017-12-29

IBM召開金融創(chuàng)新者大會(huì),助力傳統(tǒng)銀行及金融企業(yè)轉(zhuǎn)型逆襲 企業(yè)視頻課程

img

駱秋白

關(guān)注
2018年8月3日,成都——IBM公司(NYSE:IBM)今日在成都舉辦“2018IBM金融創(chuàng)新者大會(huì)”,匯聚了來自國(guó)內(nèi)金融和銀行業(yè)的200多位創(chuàng)新領(lǐng)袖,共同探討中國(guó)金融企業(yè)所面臨的商業(yè)環(huán)境變遷、全新市場(chǎng)挑戰(zhàn),以及如何憑借科技創(chuàng)新促進(jìn)業(yè)務(wù)轉(zhuǎn)型與重塑等話題。大會(huì)期間,IBM發(fā)布了銀行業(yè)和金融市場(chǎng)《2017全球最高管理層調(diào)研報(bào)告——傳統(tǒng)企業(yè)的逆襲》行業(yè)調(diào)研報(bào)告以及《銳意創(chuàng)新,馭浪前行——傳統(tǒng)銀行拉開逆襲大幕》專家洞察報(bào)告,指出了傳統(tǒng)金融企業(yè)數(shù)字化轉(zhuǎn)型所呈現(xiàn)出的“構(gòu)建平臺(tái)創(chuàng)新優(yōu)勢(shì)、充分利用數(shù)據(jù)價(jià)值、實(shí)現(xiàn)敏捷運(yùn)營(yíng)”三大趨勢(shì),以及基于本地市場(chǎng)的三個(gè)“行動(dòng)機(jī)遇”。IBM致力于憑借其領(lǐng)先的技術(shù)及解決方案,助力傳統(tǒng)銀行及金融企業(yè)樹立信心,擁抱變革,實(shí)現(xiàn)企業(yè)成功轉(zhuǎn)型。

2018IBM金融創(chuàng)新者大會(huì)現(xiàn)場(chǎng)

近年來,在科技金融迅速發(fā)展的政策和技術(shù)動(dòng)因下,中國(guó)科技金融企業(yè)已經(jīng)占據(jù)全球50%以上的市場(chǎng)份額。如今,領(lǐng)先的金融機(jī)構(gòu)都在圍繞數(shù)字化前臺(tái)、靈活的中后臺(tái)、快速的產(chǎn)品迭代、風(fēng)險(xiǎn)控制與合規(guī)、客戶洞察與生態(tài)系統(tǒng)來打造核心競(jìng)爭(zhēng)力。與此同時(shí),人工智能、機(jī)器學(xué)習(xí)、云計(jì)算、區(qū)塊鏈等新科技也在飛速迭代,并快速融入金融服務(wù)的各個(gè)領(lǐng)域。

IBM大中華區(qū)金融行業(yè)總經(jīng)理郭仁聲

IBM大中華區(qū)金融行業(yè)總經(jīng)理郭仁聲表示:“從幾年前面對(duì)跨界競(jìng)爭(zhēng)、顛覆變革的轉(zhuǎn)型焦慮期,到如今借助技術(shù)創(chuàng)新重新掌握金融服務(wù)話語權(quán),傳統(tǒng)銀行和保險(xiǎn)企業(yè)正在迎來前所未有的數(shù)字化重塑機(jī)遇。但要真正實(shí)現(xiàn)業(yè)務(wù)創(chuàng)新,引領(lǐng)市場(chǎng)變革,銀行和金融機(jī)構(gòu)必須迅速采取行動(dòng),把握轉(zhuǎn)型機(jī)遇。IBM擁有長(zhǎng)達(dá)百年的科技積累和深厚的銀行金融行業(yè)經(jīng)驗(yàn),在全球范圍內(nèi)有眾多最佳實(shí)踐,我們正在與中國(guó)的銀行、保險(xiǎn)和金融服務(wù)企業(yè)同行同創(chuàng),把握全新發(fā)展機(jī)會(huì),實(shí)現(xiàn)企業(yè)數(shù)字化轉(zhuǎn)型逆襲?!?/p>IBM全球商業(yè)價(jià)值研究院聯(lián)合牛津經(jīng)濟(jì)研究院采訪了來自112個(gè)國(guó)家、20個(gè)行業(yè)的12,854位高管,其中包括銀行和金融服務(wù)業(yè)的1,618名最高層主管,發(fā)布了《2017全球最高管理層調(diào)研報(bào)告之銀行業(yè)和金融市場(chǎng)傳統(tǒng)企業(yè)的逆襲》。報(bào)告顯示,40%的銀行業(yè)受訪者表示,他們所在的行業(yè)正經(jīng)歷翻天覆地的變化,但引發(fā)變化的主體相較于兩年前卻已經(jīng)發(fā)生了截然不同的變化——71%的受訪者則將劇變歸因于那些曾經(jīng)臃腫不堪,但如今已自我重塑,力爭(zhēng)在數(shù)字時(shí)代蓬勃發(fā)展的金融機(jī)構(gòu)。他們開始利用自身的生態(tài)系統(tǒng)優(yōu)勢(shì),聯(lián)合供應(yīng)鏈上下游中的企業(yè),大膽創(chuàng)新。受訪高管一致認(rèn)為,這些行業(yè)龍頭企業(yè)比新進(jìn)入市場(chǎng)的互聯(lián)網(wǎng)等新銳企業(yè)更具競(jìng)爭(zhēng)力。

構(gòu)建平臺(tái)創(chuàng)新優(yōu)勢(shì),推動(dòng)全新業(yè)務(wù)模式

在互聯(lián)網(wǎng)時(shí)代,跨界競(jìng)爭(zhēng)者往往將平臺(tái)作為顛覆的利器——通過平臺(tái)可以將供需雙方直接連接起來,通過減少中間環(huán)節(jié)來有效創(chuàng)造價(jià)值,這一模式在零售等行業(yè)取得了巨大的成功。銀行業(yè)和金融市場(chǎng)的最高層主管迅速發(fā)現(xiàn)了這種模式的潛力,雖然目前只有8%的受訪者表示自己的企業(yè)采用了平臺(tái)模式,但28%的受訪者正在試驗(yàn)這個(gè)概念,21%的高管準(zhǔn)備為此目的重新分配資本。

一些金融科技公司和互聯(lián)網(wǎng)公司曾憑借平臺(tái)等技術(shù)手段,通過蠶食、替代或轉(zhuǎn)換等方式對(duì)傳統(tǒng)銀行業(yè)產(chǎn)生了一定程度的沖擊和影響。但金融領(lǐng)域的特殊性使得金融平臺(tái)不能僅僅連接供需雙方,更重要的是要能夠持續(xù)經(jīng)營(yíng)、管理風(fēng)險(xiǎn)、創(chuàng)造價(jià)值,而銀行自身的資金優(yōu)勢(shì)和風(fēng)險(xiǎn)管理能力是新興的技術(shù)金融公司無法比擬的。

相比較技術(shù)構(gòu)建的優(yōu)勢(shì)壁壘,業(yè)務(wù)構(gòu)建的競(jìng)爭(zhēng)優(yōu)勢(shì)持續(xù)時(shí)間會(huì)保持得更長(zhǎng),而一旦銳意創(chuàng)新的傳統(tǒng)銀行開始全方位地采用新興技術(shù)手段,有條不紊地推進(jìn)變革,它們將具備更有利的條件做好新時(shí)代的金融服務(wù),這也是傳統(tǒng)銀行業(yè)成功逆襲的基礎(chǔ)。

IBM大中華區(qū)全球企業(yè)咨詢服務(wù)部合伙人,金融服務(wù)行業(yè)總經(jīng)理陳文

充分利用數(shù)據(jù)價(jià)值,創(chuàng)造全新商業(yè)價(jià)值

世界上的數(shù)據(jù)只有20%可以被公開搜索到,其他80%的數(shù)據(jù)都在傳統(tǒng)企業(yè)的手中。從數(shù)據(jù)角度看,傳統(tǒng)銀行業(yè)相比“輕資產(chǎn)”的互聯(lián)網(wǎng)企業(yè)擁有顯而易見的優(yōu)勢(shì)。如果傳統(tǒng)銀行業(yè)能夠利用好自己手中的數(shù)據(jù)“金礦”,就能為自身帶來前所未有的價(jià)值。

在目前中國(guó)的實(shí)體經(jīng)濟(jì)中,眾多行業(yè)中的企業(yè)都有大量的金融方面的需求,然而很多需求是過去的傳統(tǒng)銀行所不能完全滿足的,因?yàn)楹芏嘈枨笫莻鹘y(tǒng)銀行不能以有效且低成本的方式進(jìn)行風(fēng)險(xiǎn)判別的。今天,隨著眾多新興的數(shù)字化技術(shù)的出現(xiàn),數(shù)據(jù)的潛能隨著傳統(tǒng)銀行業(yè)數(shù)字化重塑的進(jìn)程被無限的釋放出來。

人工智能、區(qū)塊鏈、物聯(lián)網(wǎng)和云計(jì)算等新技術(shù)的興起,讓銀行可以結(jié)合多年積累的行業(yè)專業(yè)知識(shí)和經(jīng)驗(yàn)去挖掘數(shù)據(jù)背后的洞察、去發(fā)現(xiàn)未被滿足的客戶需求;能夠以低成本高效率的方式去控制金融風(fēng)險(xiǎn)并大膽嘗試各類業(yè)務(wù)和技術(shù)的創(chuàng)新;能夠更高效地把手上的數(shù)據(jù)轉(zhuǎn)化為真正意義上的商業(yè)價(jià)值。

實(shí)現(xiàn)敏捷運(yùn)營(yíng),重塑基礎(chǔ)架構(gòu)、流程和文化

參與調(diào)研的企業(yè)高管指出影響企業(yè)成功的三個(gè)重要因素即率先嘗試的新意愿、對(duì)高素質(zhì)員工的支持,以及敏捷運(yùn)營(yíng),這些領(lǐng)先企業(yè)通過重新設(shè)計(jì)基礎(chǔ)架構(gòu)、運(yùn)營(yíng)模式和組織文化,以快速響應(yīng)市場(chǎng)變化。

首先,銀行傳統(tǒng)的IT基礎(chǔ)架構(gòu)框架是一維的,即業(yè)務(wù)功能以線性方式實(shí)現(xiàn),這種架構(gòu)常常導(dǎo)致跨渠道客戶體驗(yàn)不一致,交易服務(wù)分散,功能重復(fù)和前后端數(shù)據(jù)分離。而未來的IT架構(gòu)框架應(yīng)當(dāng)是多維的,能夠跨出企業(yè)界限快速開發(fā)新服務(wù),可擴(kuò)展并能實(shí)時(shí)獲取數(shù)據(jù)用于當(dāng)前甚至未來的客戶交互,并且通過集成實(shí)時(shí)響應(yīng)洞察需求。

其次,銀行面臨的競(jìng)爭(zhēng)不是部門級(jí)的競(jìng)爭(zhēng),而是企業(yè)級(jí)的競(jìng)爭(zhēng),因此建立從戰(zhàn)略到流程再到應(yīng)用的一整套企業(yè)級(jí)的、統(tǒng)一的標(biāo)準(zhǔn)規(guī)范至關(guān)重要。企業(yè)級(jí)標(biāo)準(zhǔn)不再以組織的邊界劃分,而是要打破部門或條線的豎井式流程,通過提取業(yè)務(wù)的變量,比如客戶、產(chǎn)品、渠道和合作方等,形成整合的企業(yè)級(jí)流程,實(shí)現(xiàn)標(biāo)準(zhǔn)化。銀行通過構(gòu)建更高靈活度的業(yè)務(wù)流程,可以實(shí)現(xiàn)更高的業(yè)務(wù)敏捷性和靈活性。

此外,銀行在轉(zhuǎn)型中一定要解決文化轉(zhuǎn)型的問題,IBM最高管理層調(diào)研發(fā)現(xiàn),領(lǐng)先的企業(yè)往往非常重視對(duì)文化的變革,有70%的領(lǐng)先企業(yè)認(rèn)為自己的企業(yè)已經(jīng)建立了開放的企業(yè)文化,并且實(shí)現(xiàn)了敏捷運(yùn)營(yíng)。80%的銀行業(yè)和金融市場(chǎng)重塑者已經(jīng)開始主動(dòng)征詢員工的意見,開辟新的發(fā)展途徑。

IBM大中華區(qū)金融行業(yè)總經(jīng)理郭仁聲指出,基于服務(wù)傳統(tǒng)銀行和金融行業(yè)多年的深厚行業(yè)積累,IBM認(rèn)為廣大銀行和金融企業(yè)在數(shù)字化轉(zhuǎn)型過程中,如果要實(shí)現(xiàn)成功逆襲,需要掌握三個(gè)行動(dòng)機(jī)遇,即構(gòu)建生態(tài)環(huán)境,擁抱平臺(tái)金融;運(yùn)用智能自動(dòng)化高效、合規(guī)運(yùn)營(yíng);建設(shè)安全云平臺(tái),打造數(shù)字化基礎(chǔ)。

如今,傳統(tǒng)銀行及金融企業(yè)致力于創(chuàng)新并已經(jīng)拉開逆襲大幕。通過平臺(tái)化塑造、數(shù)據(jù)挖掘以及敏捷運(yùn)營(yíng),傳統(tǒng)銀行及金融企業(yè)能夠快速實(shí)現(xiàn)轉(zhuǎn)型。然而,這些則依賴于現(xiàn)有科技能力的持續(xù)釋放及高精尖的數(shù)字技術(shù)對(duì)現(xiàn)有信息科技系統(tǒng)的賦能。IBM則正是這些企業(yè)最堅(jiān)實(shí)和有力的合作伙伴,通過領(lǐng)先的技術(shù)及解決方案,助力傳統(tǒng)企業(yè)擁抱變革的浪潮,樹立行業(yè)信心,并最終實(shí)現(xiàn)企業(yè)轉(zhuǎn)型及業(yè)務(wù)重塑。

對(duì)于構(gòu)建平臺(tái),IBM可以幫助銀行及金融企業(yè)通過虛擬化將現(xiàn)有集中式基礎(chǔ)架構(gòu)中的單體應(yīng)用轉(zhuǎn)型到分布式基礎(chǔ)架構(gòu);通過對(duì)業(yè)務(wù)流程、數(shù)據(jù)的梳理和建模,將單體應(yīng)用解耦為分布式應(yīng)用架構(gòu);通過微服務(wù)化或應(yīng)用容器化,將分布式應(yīng)用真正轉(zhuǎn)型為以業(yè)務(wù)服務(wù)為基礎(chǔ)的SOA架構(gòu);并通過構(gòu)建開發(fā)、運(yùn)維一體化,重構(gòu)銀行開發(fā)、測(cè)試、發(fā)布流程,使業(yè)務(wù)投放時(shí)間大大縮短,加快應(yīng)用迭代。

不僅如此,IBM還將以其強(qiáng)有力的技術(shù)能力,將AI賦能到現(xiàn)有的科技體系中。包括,通過機(jī)器學(xué)習(xí),找到高價(jià)值客戶,在最適當(dāng)?shù)臅r(shí)機(jī)推薦最適合的產(chǎn)品;通過大數(shù)據(jù)分析,發(fā)現(xiàn)客戶的異常行為,實(shí)時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)攻擊,在事中自動(dòng)啟動(dòng)防御措施;通過語音識(shí)別和文字理解,降低人工客戶強(qiáng)度,提高人工客服質(zhì)量;通過圖像識(shí)別技術(shù),實(shí)現(xiàn)票據(jù)自動(dòng)分類,識(shí)別柜員和客戶行為,提高業(yè)務(wù)效果,降低運(yùn)行風(fēng)險(xiǎn);通過自動(dòng)化技術(shù),把業(yè)務(wù)流程串接起來,減少人工環(huán)節(jié),把人從簡(jiǎn)單重復(fù)的勞動(dòng)中解放出來。

在協(xié)同創(chuàng)新方面,IBM通過更加開放的社區(qū)、黑客松及設(shè)計(jì)思維方式,與企業(yè)聯(lián)手持續(xù)化地轉(zhuǎn)型企業(yè)職工的技能,建立企業(yè)的創(chuàng)新文化和能力。IBM在區(qū)塊鏈技術(shù)上的研發(fā)能力,能夠極大增強(qiáng)交易環(huán)境的可信度,降低陌生交易對(duì)手的交易成本;IBMWatson技術(shù)可以把銀行后臺(tái)的整合能力拓展到上下游,創(chuàng)新合作模式,形成前所未見的“產(chǎn)品”;IBM的物聯(lián)網(wǎng)技術(shù),可視化技術(shù)(AR/VR),將促使網(wǎng)點(diǎn)進(jìn)一步數(shù)字化轉(zhuǎn)型,促進(jìn)金融與生活進(jìn)一步接合,讓金融服務(wù)無所不在。

Alluxio發(fā)布新版本V1.8,加速數(shù)據(jù)分析和機(jī)器學(xué)習(xí)的云端部署 互聯(lián)網(wǎng)視頻課程

img

周幻嫣

關(guān)注
云端逐漸成為大數(shù)據(jù)企業(yè)的必爭(zhēng)之地。根據(jù)美國(guó)媒體報(bào)道,7月31日消息,分布式虛擬存儲(chǔ)系統(tǒng)Alluxio發(fā)布1.8版本,加速針對(duì)數(shù)據(jù)分析及機(jī)器學(xué)習(xí)的云端部署。

Alluxio是世界上首個(gè)能以內(nèi)存級(jí)速度集成數(shù)據(jù)的軟件系統(tǒng),其技術(shù)脫胎于其創(chuàng)始人李浩源博士在加州伯克利AMPLab的博士課題開源研究項(xiàng)目Tachyon——它能夠在大數(shù)據(jù)應(yīng)用層及存儲(chǔ)層之間搭建一個(gè)虛擬數(shù)據(jù)層,讓企業(yè)能夠利用這個(gè)系統(tǒng)來使用和管理不同的數(shù)據(jù)應(yīng)用及存儲(chǔ)方案。此前,全球知名的現(xiàn)象級(jí)開源軟件Spark及Mesos同樣出自AMPLab,只是不同于針對(duì)存儲(chǔ)的Alluxio,前者專注于計(jì)算,后者則專注于資源管理和調(diào)度。

由于擁有內(nèi)存級(jí)的訪問速度,Alluxio系統(tǒng)比過去的方案快了十倍甚至數(shù)十倍。

創(chuàng)建五年后,Alluxio是最活躍的數(shù)據(jù)生態(tài)系統(tǒng)開源項(xiàng)目之一,解決數(shù)據(jù)問題的能力備受信任。在中國(guó)市值排名前十的互聯(lián)網(wǎng)公司中,已經(jīng)有八家在應(yīng)用Alluxio的技術(shù)方案,管理PB級(jí)別的數(shù)據(jù)。除此之外,華為、聯(lián)想、中國(guó)電信、京東等公司也都在用它來管理數(shù)據(jù),其他合作伙伴包括英特爾、三星、微軟、Nvidia、Oracle等等。

Alluxio經(jīng)歷了數(shù)次版本更替。通過此次更新,這個(gè)系統(tǒng)希望能進(jìn)一步支持不同的云端存儲(chǔ)方案,加速數(shù)據(jù)儲(chǔ)存、調(diào)取和使用的速度,解決深度學(xué)習(xí)面臨的數(shù)據(jù)存儲(chǔ)問題;與此同時(shí),給他們非常重視的開源社區(qū)提供更多的支持和幫助。

針對(duì)云端部署,Alluxio的新版本提供了三個(gè)全新的功能:

1. 感知定位的數(shù)據(jù)管理工具。企業(yè)可以為數(shù)據(jù)應(yīng)用設(shè)置不同的策略,根據(jù)數(shù)據(jù)的位置標(biāo)記來選定具體的數(shù)據(jù)調(diào)用區(qū)域或者優(yōu)化數(shù)據(jù)分布,從而降低調(diào)用不同存儲(chǔ)位置的數(shù)據(jù)時(shí)的成本、提高效率。

2. 針對(duì)不同云端存儲(chǔ)方案的優(yōu)化。解決對(duì)象存儲(chǔ)或者云端存儲(chǔ)方案和傳統(tǒng)的HDFS(HadoopDistributedFileSystem)方案中的API及執(zhí)行效率的差別帶來的問題;也讓把數(shù)據(jù)從HDFS轉(zhuǎn)移到對(duì)象存儲(chǔ)時(shí)更加容易,真正做到在云端輕便地轉(zhuǎn)移數(shù)據(jù)。

3. FUSE(FilesysteminUserspace)界面。FUSE能把云上的數(shù)據(jù)緩存在本地,通過普通的本地文件夾展現(xiàn),以無縫支持現(xiàn)有的機(jī)器學(xué)習(xí)和大數(shù)據(jù)分析框架來存取云端數(shù)據(jù)。

云端趨勢(shì)下,混合云部署的強(qiáng)大需求

此次Alluxio版本更新,可以說是順應(yīng)了企業(yè)“往云上走”的趨勢(shì)。

近幾年,不僅有層出不窮的云端數(shù)據(jù)存儲(chǔ)、計(jì)算和分析創(chuàng)業(yè)項(xiàng)目提供服務(wù),大公司也在尋求更好的云端部署方案。

2018年6月,微軟收購(gòu)知名開源開發(fā)平臺(tái)GitHub后,并表示將進(jìn)行GitHub與自己的云服務(wù)產(chǎn)品AzureCloud的整合。分析報(bào)告預(yù)測(cè),未來云服務(wù)市場(chǎng)將從今年的281億美元增長(zhǎng)到2021年的533億美元。

“數(shù)據(jù)分析和機(jī)器學(xué)習(xí)的興起讓云端的計(jì)算量大量增長(zhǎng),Alluxio的特性意味著它同樣可以很好地管理混合云的數(shù)據(jù)?!崩詈圃磳?duì)鈦媒體說道。451Research的報(bào)告顯示,預(yù)計(jì)在2019年,超過66%的企業(yè)會(huì)使用一個(gè)混合云或者多個(gè)云服務(wù)方案的架構(gòu),它們都可能面對(duì)不同云服務(wù)上迥異的操作差異,單憑自己很難保證效率,需要第三方服務(wù)方案的協(xié)助。

更遠(yuǎn)的未來里,中小型企業(yè)可能會(huì)徹底轉(zhuǎn)向公有云部署。

Gartner預(yù)測(cè),到2021年,全球超過50%的企業(yè)會(huì)應(yīng)用純粹的公有云存儲(chǔ)方案,而更大的公司則會(huì)應(yīng)用更多的第三方云端基礎(chǔ)架構(gòu)來管理混合云。

這和李浩源的判斷相符。他認(rèn)為,對(duì)于很多現(xiàn)代企業(yè)來說真正的價(jià)值往往在數(shù)據(jù)里。

尤其是對(duì)于某些大型企業(yè)來說,最核心的數(shù)據(jù)管理很難假手于人。2017年馬云接受Bloomberg專訪時(shí)曾說出金句,“數(shù)據(jù)的重要程度堪比上個(gè)世紀(jì)的石油?!?/p>

EricAnderson(時(shí)任Google產(chǎn)品經(jīng)理)談Alluxio

“總有一些數(shù)據(jù)他們希望保存在本地服務(wù)器上,但全部放在本地成本又太高,所以選折中方案,在一個(gè)無縫的架構(gòu)下管理私有和公有云是一個(gè)剛需?!崩詈圃凑f道。

除此之外,Alluxio也希望能解決近幾年火熱的數(shù)據(jù)分析及深度學(xué)習(xí)面臨的數(shù)據(jù)存儲(chǔ)問題。

對(duì)于數(shù)據(jù)分析來說,已經(jīng)有了不少使用云上數(shù)據(jù)的方案,Alluxio只是能幫助提高性能、降低費(fèi)用。

對(duì)于深度學(xué)習(xí),問題則稍顯復(fù)雜。

“不是所有的訓(xùn)練數(shù)據(jù)都能直接用于像Tensorflow這種深度學(xué)習(xí)框架,另外各類分布式存儲(chǔ)和云存儲(chǔ)的交互方式和傳統(tǒng)本地交互方式有很大區(qū)別,用戶難以準(zhǔn)確地配置和使用新工具?!迸e個(gè)例子,沒有Alluxio時(shí),讓深度學(xué)習(xí)框架TensorFlow訪問微軟云服務(wù)AzureObjectstore上的數(shù)據(jù)就是一件難以完成的事情。

Alluxio的特性意味著它能整合各類存儲(chǔ)系統(tǒng),縮短各類深度學(xué)習(xí)框架與存儲(chǔ)層之間的距離,提高效率及彈性、降低成本。另一方面,這次更新里的FUSE工具則讓Alluxio可以掛載本地文件系統(tǒng),讓用戶在使用遠(yuǎn)程云端分布式存儲(chǔ)時(shí),擁有和本地?cái)?shù)據(jù)時(shí)相似的交互體驗(yàn)。

關(guān)注開源社區(qū)

除了針對(duì)云端部署及深度學(xué)習(xí)的更新之外,Alluxio的新版本還有另一個(gè)重點(diǎn):為開發(fā)者提供了更多便利,包括:

1.提供針對(duì)應(yīng)用運(yùn)行的數(shù)據(jù)服務(wù)監(jiān)視工具,包括能夠獲取集群實(shí)時(shí)數(shù)據(jù)的web圖形界面以及命令行界面(CommandLineInterface)工具,讓開發(fā)者能夠更好地了解數(shù)據(jù)的使用情況、分析性能結(jié)果并獲得數(shù)據(jù)洞察。

2.更完善的生態(tài)系統(tǒng)集成。把對(duì)數(shù)據(jù)服務(wù)的追蹤和洞察擴(kuò)展到不同的應(yīng)用層和存儲(chǔ)層,開發(fā)者可以通過新的工具直觀地看到存儲(chǔ)系統(tǒng)中的問題,比如延時(shí)的直方圖和存儲(chǔ)空間利用率。

3.一個(gè)入門套件(StarterKit),其中包括預(yù)建的代碼及其他文件和一些簡(jiǎn)單的案例展示,包括“如何在本地機(jī)器上安裝Alluxio”“如何安裝和設(shè)置AWSS3Bucket(存儲(chǔ)桶)及加速遠(yuǎn)程讀取”,讓開發(fā)者能更快地上手并使用Alluxio。

“開源社區(qū)是我們最珍視的事情之一,所以希望盡可能地幫助開發(fā)者理解和使用這個(gè)系統(tǒng)?!崩詈圃凑f道。他認(rèn)為,自創(chuàng)立之初,這一社區(qū)帶來的活力是推動(dòng)Alluxio迅速進(jìn)展的重要推力之一。

在2016年接受CSDN采訪時(shí),Alluxio曾表示“Alluxio是史上成長(zhǎng)速度最快的開源社區(qū)之一”,如今其貢獻(xiàn)者已經(jīng)超過800人,在GitHub上星標(biāo)超過3000個(gè)。

正在比賽氣泡足球的部分Alluxio團(tuán)隊(duì)成員

這個(gè)項(xiàng)目里還有不少活躍的公司貢獻(xiàn)者,他們還能提供針對(duì)具體產(chǎn)品和應(yīng)用場(chǎng)景的反饋。英特爾、騰訊、阿里巴巴、百度、京東、陌陌等公司同樣也是這個(gè)開源項(xiàng)目的貢獻(xiàn)者之一。比如陌陌的工程師團(tuán)隊(duì)會(huì)基于陌陌的應(yīng)用場(chǎng)景,做出適配和調(diào)整,而后經(jīng)過Alluxio的社區(qū)管理者審核后接納,“最終形成一個(gè)正向的反饋,是一個(gè)雙向改進(jìn)的過程”。

百度、去哪兒和陌陌都曾經(jīng)就應(yīng)用Alluxio之后的經(jīng)驗(yàn)做出分享,比如百度此前分享過,在用他們自己開發(fā)的使用SparkSQL作為計(jì)算引擎的查詢系統(tǒng)時(shí),單獨(dú)一次查詢需要100-150秒;加上作為內(nèi)存中心的存儲(chǔ)層的Alluxio之后,數(shù)據(jù)可能會(huì)沖擊本地或遠(yuǎn)程Alluxio節(jié)點(diǎn),需要10-15秒;當(dāng)所有數(shù)據(jù)儲(chǔ)存在Alluxio本地時(shí),平均只需5秒,速度提升了30倍。測(cè)試過后,百度圍繞Alluxio和SparkSQL建立了一個(gè)完整的系統(tǒng)。

2016年初,Alluxio曾獲得硅谷知名風(fēng)險(xiǎn)投資機(jī)構(gòu)AndressenHorowitz的750萬美元融資。

img

在線咨詢

建站在線咨詢

img

微信咨詢

掃一掃添加
動(dòng)力姐姐微信

img
img

TOP