騰訊金融云胡利明:分布式數(shù)據(jù)庫(kù)是金融業(yè)務(wù)發(fā)展的必然趨勢(shì)

數(shù)據(jù)庫(kù)是金融信息化最重要的應(yīng)用系統(tǒng)之一,其可用性和擴(kuò)展性一直是金融行業(yè)最為關(guān)注的問(wèn)題。

如今,隨著金融數(shù)字化轉(zhuǎn)型的深入,金融機(jī)構(gòu)系統(tǒng)規(guī)模及復(fù)雜程度呈指數(shù)級(jí)增長(zhǎng),傳統(tǒng)模式下靠采購(gòu)高端設(shè)備以及增加硬件來(lái)保證數(shù)據(jù)庫(kù)可用性和擴(kuò)展性的方案正面臨越來(lái)越大的壓力。另一個(gè)維度下,數(shù)據(jù)庫(kù)的自主可控對(duì)于金融行業(yè)的數(shù)據(jù)安全、業(yè)務(wù)穩(wěn)定具有重要意義,只有實(shí)現(xiàn)“自主可控”才能從根本上保證信息安全。

互聯(lián)網(wǎng)行業(yè)在自身業(yè)務(wù)場(chǎng)景的長(zhǎng)期探索與實(shí)踐過(guò)程中,逐漸發(fā)展出分布式數(shù)據(jù)庫(kù)的技術(shù)實(shí)現(xiàn),并被廣泛地被應(yīng)用在各種高并發(fā)、大數(shù)據(jù)量、要求強(qiáng)一致性且需要強(qiáng)大橫向擴(kuò)展能力的業(yè)務(wù)場(chǎng)景中,這也為大流量、多模式、強(qiáng)安全的金融新業(yè)態(tài)應(yīng)用探索出技術(shù)保障路線,積累了寶貴的應(yīng)用實(shí)踐經(jīng)驗(yàn)。

日前,記者專(zhuān)訪了騰訊金融云總經(jīng)理胡利明,就自主可控的金融數(shù)據(jù)庫(kù)技術(shù)發(fā)展及其對(duì)支撐金融行業(yè)數(shù)字化轉(zhuǎn)型的意義進(jìn)行了深入交流和探討。

胡利明認(rèn)為,金融業(yè)務(wù)場(chǎng)景互聯(lián)網(wǎng)化、高并發(fā)、小額高頻交易場(chǎng)景越來(lái)越多,傳統(tǒng)數(shù)據(jù)庫(kù)無(wú)法適應(yīng)業(yè)務(wù)發(fā)展需求,自主可控分布式數(shù)據(jù)庫(kù)可以很好的滿足這類(lèi)場(chǎng)景。“金融行業(yè)發(fā)展并應(yīng)用自主可控的分布式數(shù)據(jù)庫(kù)技術(shù),既是新階段金融業(yè)務(wù)發(fā)展的必然趨勢(shì),也是強(qiáng)化金融數(shù)字化技術(shù)自主可控的必然選擇?!?/p>


Q在您的理解中,新形勢(shì)下金融行業(yè)對(duì)數(shù)據(jù)庫(kù)技術(shù)的訴求是什么?

胡利明:近年來(lái),隨著中國(guó)經(jīng)濟(jì)快速發(fā)展以及普惠金融政策的推廣,金融行業(yè)在業(yè)務(wù)形態(tài)、客戶(hù)群體、銷(xiāo)售渠道上都發(fā)生了很大的變化。對(duì)公業(yè)務(wù)下滑而零售業(yè)務(wù)高速發(fā)展,物理網(wǎng)點(diǎn)萎縮對(duì)應(yīng)的移動(dòng)化渠道在不斷發(fā)展,客戶(hù)群體也在從高端群體向長(zhǎng)尾客群變遷。多維、高頻、線上場(chǎng)景成為金融業(yè)務(wù)的主流模式。

數(shù)據(jù)庫(kù)是承載金融業(yè)務(wù)運(yùn)行的底層基礎(chǔ)設(shè)施。過(guò)去金融行業(yè)普遍采用高端的設(shè)備,比如使用小型機(jī)和大型存儲(chǔ)來(lái)保證數(shù)據(jù)庫(kù)的可用性或者通過(guò)增加CPU、內(nèi)存、磁盤(pán)等方式提高處理能力。

但在新形勢(shì)下,這種方式正受到越來(lái)越大的挑戰(zhàn)。譬如說(shuō),急劇增長(zhǎng)的數(shù)據(jù)量與傳統(tǒng)數(shù)據(jù)庫(kù)有限容量之間的矛盾;海量用戶(hù)帶來(lái)的高并發(fā)系統(tǒng)壓力與傳統(tǒng)數(shù)據(jù)庫(kù)性能無(wú)法水平擴(kuò)展的矛盾;實(shí)時(shí)交易響應(yīng)與快速數(shù)據(jù)分析統(tǒng)一管理需求與傳統(tǒng)數(shù)據(jù)庫(kù)無(wú)法兼顧OLTP&OLAP的矛盾;以及越來(lái)越高標(biāo)準(zhǔn)業(yè)務(wù)連續(xù)性要求與昂貴的傳統(tǒng)數(shù)據(jù)庫(kù)容災(zāi)技術(shù)的矛盾。當(dāng)然,還有國(guó)產(chǎn)自主可控要求與傳統(tǒng)數(shù)據(jù)庫(kù)方案基本為國(guó)外產(chǎn)品的矛盾。

因此,金融行業(yè)發(fā)展并應(yīng)用自主可控的分布式數(shù)據(jù)庫(kù)技術(shù),既是新階段金融業(yè)務(wù)發(fā)展的必然趨勢(shì),也是強(qiáng)化金融數(shù)字化技術(shù)自主可控的必然選擇。

Q 您剛才提到的分布式數(shù)據(jù)庫(kù)技術(shù),能否請(qǐng)您詳細(xì)做一下介紹?

胡利明:分布式數(shù)據(jù)庫(kù)系統(tǒng)是數(shù)據(jù)庫(kù)技術(shù)和網(wǎng)絡(luò)技術(shù)相互滲透、有機(jī)結(jié)合的成果,在數(shù)據(jù)庫(kù)領(lǐng)域已形成一個(gè)分支。經(jīng)過(guò)多年發(fā)展,其體系架構(gòu)已經(jīng)逐漸成熟。

分布式數(shù)據(jù)庫(kù)系統(tǒng)必須滿足兩個(gè)特征。一是分布性:數(shù)據(jù)存儲(chǔ)在多個(gè)獨(dú)立的數(shù)據(jù)庫(kù)服務(wù)器中,目前硬件一般采用低成本的X86架構(gòu)服務(wù)器。二是邏輯整體性:分布式數(shù)據(jù)庫(kù)系統(tǒng)中的數(shù)據(jù)是相互關(guān)聯(lián)的,邏輯上是一個(gè)統(tǒng)一的整體,對(duì)上層應(yīng)用來(lái)說(shuō),可視為一個(gè)集中式的數(shù)據(jù)庫(kù)系統(tǒng)。

分布式數(shù)據(jù)庫(kù)技術(shù)發(fā)展至今,技術(shù)種類(lèi)可以用shared-Nothing和shared-Disk兩種類(lèi)型概括。其中,Shared-Nothing方案發(fā)展最久,也最為成熟。它具備成本低,數(shù)據(jù)庫(kù)性能和容量擴(kuò)展方便,理論上全局故障概率極低等優(yōu)勢(shì)。微信支付就是用的這種方案。

Shared-Disk方案則是基于分布式云存儲(chǔ)和云服務(wù)器虛擬化衍生出來(lái)的一種方案,雖然出現(xiàn)時(shí)間不長(zhǎng),但其SQL能力好,幾乎100%兼容MySQL、PostgreSQL等數(shù)據(jù)庫(kù),相對(duì)成本低,也可復(fù)用云上的IaaS資源。當(dāng)然,Shared-Disk方案的劣勢(shì)在于其軟件架構(gòu)仍然采用傳統(tǒng)集中式方案,導(dǎo)致其寫(xiě)性能擴(kuò)展性的不足。

Q 騰訊在分布式數(shù)據(jù)庫(kù)技術(shù)應(yīng)用上有哪些探索?

胡利明:多年以來(lái),騰訊一直致力于實(shí)現(xiàn)數(shù)據(jù)庫(kù)的自主可控。為了滿足基于微信支付/紅包等金融業(yè)務(wù)場(chǎng)景需要,騰訊歷經(jīng)10余年的自主研發(fā)打造了騰訊分布式數(shù)據(jù)庫(kù)產(chǎn)品TDSQL(TencentDistributed SQL),這是一款兼容MySQL的HTAP分布式數(shù)據(jù)庫(kù)產(chǎn)品,具備強(qiáng)一致高可用、全球部署架構(gòu)、分布式水平擴(kuò)展、高性能、企業(yè)級(jí)安全等特性,能夠同時(shí)提供智能DBA、自動(dòng)化運(yùn)營(yíng)、監(jiān)控告警等配套設(shè)施。

騰訊云TDSQL采用分布式集群架構(gòu),這種集群架構(gòu)具有較高的靈活性,也大大簡(jiǎn)化了各個(gè)節(jié)點(diǎn)之間的通信機(jī)制及其對(duì)于硬件的需求。這不僅意味著TDSQL的關(guān)系型實(shí)例、分布式實(shí)例、分析性實(shí)例可以混合部署在同一集群中,也意味著即使是基于簡(jiǎn)單的x86服務(wù)器,也可以搭建出類(lèi)似于小型機(jī)、共享存儲(chǔ)等一樣穩(wěn)定可靠的數(shù)據(jù)庫(kù)?;谶@種靈活的架構(gòu),我們可以輕松實(shí)現(xiàn)兩地三中心、兩地四中心、多地多中心等高可用方案。

目前,騰訊公司的計(jì)費(fèi)業(yè)務(wù)系統(tǒng)使用TDSQL托管賬戶(hù)近280億,日流水量超過(guò)150億條,每天處理的交易量超過(guò)100億筆。

在數(shù)據(jù)中心聯(lián)盟(DCA)第七批大數(shù)據(jù)產(chǎn)品評(píng)測(cè)結(jié)果評(píng)審會(huì)上,騰訊云TDSQL在分布式數(shù)據(jù)庫(kù)的50項(xiàng)產(chǎn)品能力評(píng)測(cè)中,以47項(xiàng)通過(guò)的優(yōu)異成績(jī)通過(guò)評(píng)測(cè)。IT垂直門(mén)戶(hù)媒體IT168主辦的2018年度的技術(shù)卓越獎(jiǎng)評(píng)選中,TDSQL也榮獲技術(shù)卓越獎(jiǎng)。這代表著騰訊云TDSQL在產(chǎn)品和技術(shù)實(shí)力層面得到了各界認(rèn)可。

Q 能否舉例介紹一下TDSQL目前的應(yīng)用案例?

胡利明:微眾銀行是騰訊云TDSQL對(duì)外輸出的第一個(gè)客戶(hù)。作為國(guó)內(nèi)首家互聯(lián)網(wǎng)銀行,微眾銀行的IT基礎(chǔ)架構(gòu)拋棄了傳統(tǒng)的IOE,完全采用了互聯(lián)網(wǎng)分布式架構(gòu)。從2014年開(kāi)始,騰訊云開(kāi)始為微眾銀行提供核心交易數(shù)據(jù)庫(kù)解決方案。騰訊云TDSQL在微眾銀行作為交易核心數(shù)據(jù)庫(kù),部署超過(guò)800個(gè)節(jié)點(diǎn),承載全行所有OLTP業(yè)務(wù)。

由于完全采用互聯(lián)網(wǎng)架構(gòu),相比傳統(tǒng)的IOE方案,微眾銀行在IT成本上大幅節(jié)約。同時(shí),互聯(lián)網(wǎng)架構(gòu)的高伸縮性,使得微眾銀行的服務(wù)能力具備很高的彈性,足以輕松應(yīng)對(duì)普惠金融場(chǎng)景下的潮涌。目前,微眾銀行每個(gè)賬戶(hù)的運(yùn)營(yíng)成本平均只有6元人民幣,僅為內(nèi)地傳統(tǒng)銀行的1/10,相比國(guó)際銀行則更低,只有其成本的2%至5%。

除了微眾銀行,騰訊云TDSQL還支撐著華通銀行、華夏銀行、濰坊銀行、內(nèi)蒙金谷農(nóng)商銀行、北京人壽、愛(ài)心人壽等眾多銀行和保險(xiǎn)公司的互聯(lián)網(wǎng)核心生產(chǎn)系統(tǒng),已經(jīng)為超過(guò)500+的政企和金融機(jī)構(gòu)提供數(shù)據(jù)庫(kù)的公有云及私有云服務(wù),客戶(hù)覆蓋銀行、保險(xiǎn)、證券、互聯(lián)網(wǎng)金融、計(jì)費(fèi)、第三方支付、物聯(lián)網(wǎng)、政務(wù)等領(lǐng)域,得到了客戶(hù)及行業(yè)的一致認(rèn)可。

未來(lái),騰訊云TDSQL 將持續(xù)通過(guò)產(chǎn)研結(jié)合、產(chǎn)用結(jié)合的方式進(jìn)行研發(fā)突破,并開(kāi)放商用更多特性,助力金融機(jī)構(gòu)加速數(shù)字化轉(zhuǎn)型步伐。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2019-01-29
騰訊金融云胡利明:分布式數(shù)據(jù)庫(kù)是金融業(yè)務(wù)發(fā)展的必然趨勢(shì)
金融行業(yè)發(fā)展并應(yīng)用自主可控的分布式數(shù)據(jù)庫(kù)技術(shù),既是新階段金融業(yè)務(wù)發(fā)展的必然趨勢(shì),也是強(qiáng)化金融數(shù)字化技術(shù)自主可控的必然選擇。

長(zhǎng)按掃碼 閱讀全文