招商銀行定位為“金融科技銀行”,體驗升級作為銀行業(yè)數(shù)字化轉(zhuǎn)型的華為戶招化數(shù)代表和先行者,在持續(xù)金融創(chuàng)新之路上堅定不移的云助探索前行。招行數(shù)據(jù)倉庫架構(gòu)師曾民在華為云TechWave全球技術(shù)峰會上分享了招商銀行云化數(shù)倉探索之路。力招路
早在1998年,商銀售客索招行就開始引入數(shù)據(jù)倉庫的行零行加拿大預(yù)測查詢理念,使用SYBASE搭建數(shù)據(jù)處理平臺,倉探成為國內(nèi)最早一批開展企業(yè)級數(shù)據(jù)倉庫建設(shè)的體驗升級銀行。2002年基于DB2構(gòu)建數(shù)據(jù)倉庫平臺,華為戶招化數(shù)再到2013年重構(gòu)TD倉庫。云助招行基本上建成涵蓋客戶服務(wù)、力招路產(chǎn)品銷售、商銀售客索風(fēng)險管理、行零行績效管理、倉探監(jiān)管審計等領(lǐng)域的體驗升級完整的數(shù)據(jù)應(yīng)用平臺。
2020年招行正式啟動數(shù)據(jù)使能平臺建設(shè),并提出了“人人用數(shù),人人都是數(shù)據(jù)分析師”的數(shù)據(jù)發(fā)展戰(zhàn)略,一體機(jī)數(shù)據(jù)倉庫使用模式遇到了瓶頸:數(shù)據(jù)倉庫平臺存儲和算力無法匹配應(yīng)用數(shù)據(jù)量高速增長。加拿大28隨著云計算技術(shù)的蓬勃發(fā)展,云化數(shù)據(jù)倉庫可通過計算存儲和網(wǎng)絡(luò)的資源池化管理,按需彈性部署;云分布式架構(gòu)以其靈活和高可用優(yōu)勢,成為招商銀行數(shù)據(jù)使能平臺首選架構(gòu)。
面向未來,新一代數(shù)據(jù)倉庫平臺是怎么樣的?在不斷思考中,招商銀行開啟了新一代云數(shù)據(jù)倉庫的選型。
打破重建無疑是極其痛苦的。新一代云數(shù)據(jù)倉庫的加拿大預(yù)測考察包括數(shù)據(jù)平臺的數(shù)據(jù)處理能力、性能、高可用性、擴(kuò)展性、易用性、通用性、自主可控性等維度。基準(zhǔn)測試基于TPC-DS 1000X標(biāo)準(zhǔn)測試套件,包括4大項、11個子任務(wù);場景測試基于“分行手機(jī)銀行行為分析”業(yè)務(wù),包括6960個數(shù)據(jù)庫對象,2470個批處理腳本,數(shù)據(jù)量超過30TB。隨后,數(shù)據(jù)研發(fā)部啟動了更嚴(yán)苛運(yùn)維測試,畢竟數(shù)據(jù)平臺除了性能指標(biāo)以外,更重要的是要能穩(wěn)定運(yùn)行。結(jié)合招行實際運(yùn)維需要,數(shù)據(jù)中心從安全功能、性能容量、管理功能、部署能力、維護(hù)能力、拓展能力這六個維度設(shè)計了若干測試用例,涉及7大項,98個子任務(wù)。測試評估結(jié)果,華為云數(shù)倉GaussDB(DWS)完全滿足招行標(biāo)準(zhǔn)。
華為云數(shù)倉GaussDB(DWS) “大”、“快”、“穩(wěn)”的技術(shù)特征符合招商銀行對核心數(shù)倉的能力要求。尤其是“大”:基于MPP的全對稱分布式架構(gòu),橫向可擴(kuò)展至2048節(jié)點(diǎn)大集群,支持EB級數(shù)據(jù)量,突破傳統(tǒng)數(shù)倉擴(kuò)展的天花板!
招商銀行2020年4月正式啟動原數(shù)據(jù)倉庫平臺向華為云GaussDB(DWS)遷移項目。招行信息技術(shù)部、數(shù)據(jù)中心、架構(gòu)辦等多方部門通力合作,華為數(shù)據(jù)倉庫研發(fā)專家、云技術(shù)專家以及資深服務(wù)技術(shù)團(tuán)隊全程鼎力支持,聯(lián)合成立數(shù)倉遷移實施團(tuán)隊,為招行核心數(shù)倉平臺遷移保駕護(hù)航。2020年7月完成基礎(chǔ)設(shè)施部署并開始應(yīng)用遷移;2021年1月完成首批11個零售應(yīng)用切換,并全部完成投產(chǎn),所有應(yīng)用均平穩(wěn)運(yùn)行,原數(shù)倉平臺相關(guān)應(yīng)用已關(guān)停。
基于華為云GaussDB(DWS)構(gòu)筑全新一代云上數(shù)倉,招商銀行實現(xiàn)對零售客戶體驗的實時監(jiān)測和數(shù)字化呈現(xiàn),更大的算力支撐使得跑批作業(yè)速度較之前得到大幅提升,數(shù)據(jù)分析師們得以更快更深更廣地挖掘客戶體驗數(shù)據(jù)價值,全面升級零售客戶業(yè)務(wù)體驗。
招行云化數(shù)倉的探索還在繼續(xù),2021年6月預(yù)計完成一半應(yīng)用遷移,2022年6月預(yù)計完成全部應(yīng)用遷移和投產(chǎn)。華為云數(shù)倉GaussDB(DWS)也將會繼續(xù)助力招商銀行的數(shù)字化轉(zhuǎn)型之路,未來可期。
上一篇:哈弗赤兔用智能、安全挑戰(zhàn)重慶8D魔幻城