騰訊金融級核心交易解決方案TDMesh深度實踐

近日，騰訊計費團隊首度分享了在金融級核心交易解決方案TDMesh上的深度實踐。

騰訊計費是孵化于支撐騰訊內(nèi)部業(yè)務(wù)千億級營收的互聯(lián)網(wǎng)交易平臺，它匯集了國內(nèi)外主流支付渠道，提供賬戶管理、精準(zhǔn)營銷、安全風(fēng)控、稽核分賬、計費分析等多維度服務(wù)。平臺承載騰訊公司收入大盤， 百億級賬戶、百億級日交易、覆蓋180+個國家(地區(qū))、服務(wù)數(shù)萬業(yè)務(wù)和上百萬商戶，是一個全方位的一站式計費平臺。

TDMesh 由支撐騰訊內(nèi)部15年的計費技術(shù)體系孵化而來，包含全域一致性、海量請求支撐、7*24不間斷服務(wù)管理、秒級的智能監(jiān)控和彈性伸縮等多個功能板塊，共同組成一套全面的金融級處理方案。

騰訊計費平臺部總經(jīng)理李綱表示：“基于計費的高一致、高性能、高可用、高可靠技術(shù)要求等挑戰(zhàn)，騰訊計費平臺部基于服務(wù)內(nèi)部業(yè)務(wù)的多年經(jīng)驗，將核心技術(shù)板塊全面優(yōu)化整合，推出一套金融級的核心交易解決方案TDMesh。在不斷自我進化持續(xù)打磨的同時，也希望通過參與相關(guān)技術(shù)討論，與合作伙伴共同構(gòu)建金融級高一致技術(shù)范例，推動行業(yè)發(fā)展。”

應(yīng)對“四高”挑戰(zhàn)，騰訊計費的技術(shù)構(gòu)建思路

騰訊計費系統(tǒng)的基礎(chǔ)建設(shè)起步于 2004 年，在此后 15 年的發(fā)展過程中，隨著接入業(yè)務(wù)增多、移動支付興起、部署區(qū)域全球化，騰訊在計費方面面臨了一系列的挑戰(zhàn)，舉例來看：

· 金融級高一致。騰訊計費承載游戲賬戶、積分權(quán)益、泛娛樂訂閱及廣告客戶等百億級賬戶類存儲，交易高峰期數(shù)十萬級每秒，日交易量超百億，平均每天的版本或流程變更超百項。在巨量的交易規(guī)模下，如何確保千億年營收的零差錯，實現(xiàn)金融級一致性，是計費的最核心關(guān)鍵問題。

· 高性能。計費流程，如游戲點券消費、按次的廣告點擊扣費等，訪問高頻且常伴有熱點，加上如活動放量時流量的數(shù)十倍突發(fā)，疊加瞬間峰值超百萬tps，這需要計費具備很高的單機性能和整體余度;

· 高可用。計費服務(wù)目前全球已部署100+ 集群，作為一個大跨度的支付系統(tǒng)，必然要面對各種網(wǎng)絡(luò)異常，不同國家支付渠道的差異，配置和數(shù)據(jù)處理的困難等問題，這些都要求計費服務(wù)具備很強的業(yè)務(wù)容災(zāi)和數(shù)據(jù)容災(zāi)能力，有充分的彈性和容錯設(shè)計，不可用時間控制在全年分鐘級別;

· 高可靠。主要針對存儲層，只要響應(yīng)成功就代表數(shù)據(jù)一定落盤，對于如操作系統(tǒng)崩潰等意外宕機能確保數(shù)據(jù)不丟;同時, 對分布式任何節(jié)點的故障，引發(fā)的本機數(shù)據(jù)損壞和腦裂等問題，也都要求數(shù)據(jù)嚴(yán)格不錯不丟。

為應(yīng)對上述 ”四高“ 挑戰(zhàn)，騰訊計費在技術(shù)方面采用微服務(wù)和中臺化兩大設(shè)計思路：

微服務(wù)設(shè)計，通過合理的功能拆分，及精細(xì)服務(wù)治理如服務(wù)的注冊、發(fā)現(xiàn)、熔斷、自愈、負(fù)載均衡、鏈路跟蹤等實現(xiàn)功能的快速擴展和流量的高效調(diào)度，以此達(dá)成整體系統(tǒng)的高伸縮和高可用。

中臺化設(shè)計，通過合理的功能組織，明確模塊邊界，內(nèi)部類同邏輯的組件化抽象，及統(tǒng)一的服務(wù)鑒權(quán)、服務(wù)間配置、服務(wù)內(nèi)事務(wù)、和服務(wù)的統(tǒng)一存儲等規(guī)范，來實現(xiàn)整體服務(wù)的高可復(fù)用，提升研發(fā)效能。

基于上述思路，騰訊計費構(gòu)建了金融級的計費解決方案TDMesh，它覆蓋從接入到存儲，各個環(huán)節(jié)有四高要求的組件，加上在運營上的服務(wù)調(diào)度、監(jiān)控、變更灰度和數(shù)據(jù)分析等管控模塊。這些組件模塊相互配合，有力支撐起騰訊計費和外部伙伴的業(yè)務(wù)開展。

技術(shù)產(chǎn)品體系完善，TDMesh 已受到行業(yè)認(rèn)可

從技術(shù)架構(gòu)層面來看，TDMesh 已經(jīng)形成完善而豐富的技術(shù)產(chǎn)品體系。

騰訊計費首席架構(gòu)師、計費專家陳寧國全面解析了TDMesh的整體架構(gòu)。他介紹道，騰訊金融級核心交易解決方案TDMesh，包含1)TDEA統(tǒng)一的入口調(diào)度、協(xié)議管理、和服務(wù)鑒權(quán); 2)TDCC 配置引擎，多環(huán)節(jié)復(fù)雜關(guān)聯(lián)配置的高一致管理; 3) TDXA交易引擎，應(yīng)用層復(fù)雜長鏈路交易邏輯的高一致管理; 4) TDF高性能基礎(chǔ)服務(wù)框架; 5)TDMQ高一致高性能的分布式消息隊列; 6)TD-Hold高一致高性能分布式緩存; 7) TDSQL金融級高一致高可靠數(shù)據(jù)庫; 8) TDLedger去中心化的高一致記賬機制，區(qū)塊鏈; 9)運營系統(tǒng)，實現(xiàn)服務(wù)的統(tǒng)一調(diào)度和彈性管理。

對于開發(fā)者，使用 TDMesh 后，APP 只要對接 TDXA，就可以一步接入 TDMesh 的所有組件，實現(xiàn)從配置、接入、應(yīng)用層事務(wù)、到訂單存儲、消息通信、對賬等整個交易業(yè)務(wù)鏈的一攬子標(biāo)準(zhǔn)化處理，來實現(xiàn)自身服務(wù)的高一致等四高要求。

TDMesh在計費的典型應(yīng)用舉例：一次典型折扣優(yōu)惠活動，通過7個關(guān)鍵環(huán)節(jié)的組件技術(shù)能力合作， 實現(xiàn)大請求量活動的順利實施。

值得一提的是，整套 TDMesh 分布式解決方案，不僅適用于計費，對于金融相關(guān)行業(yè)都有較高的參考和應(yīng)用價值，并且已經(jīng)受到金融行業(yè)的認(rèn)可。

至目前，金融級解決方案 TDMesh 的構(gòu)成部分之一、騰訊計費自研的分布式數(shù)據(jù)庫 TDSQL 已經(jīng)支持了國內(nèi)首家傳統(tǒng)銀行——江蘇張家港農(nóng)商銀行的核心業(yè)務(wù)系統(tǒng)轉(zhuǎn)向新一代分布式核心業(yè)務(wù)系統(tǒng)、實現(xiàn)自主可控。同時，這一分布式數(shù)據(jù)庫產(chǎn)品也已開放給合作伙伴;目前，TDSQL 數(shù)據(jù)庫已為超過 500 家公有云客戶，中國銀行等近 30 家專有云客戶提供數(shù)據(jù)庫服務(wù)。

本次發(fā)布，重點介紹的TDMesh組件有解決應(yīng)用層事務(wù)的TDXA和 負(fù)責(zé)系統(tǒng)解耦、事務(wù)異常處理的TDMQ。

TDXA(Tencent Distributed eXtended Architecture)，是一個旨在長鏈路一致性，支持多種事務(wù)模式混合， 圖形化開發(fā)的分布式事務(wù)調(diào)度引擎。其支持的事務(wù)模式，包括如TCC/Saga/AT等; 其編排能力，主要是通過流程狀態(tài)的跳轉(zhuǎn)追蹤來自動確認(rèn)或回滾，和異常時的零人工介入;其開發(fā)模式，主要是圖形化的一站式的集成研發(fā)平臺;從而最終實現(xiàn)

將復(fù)雜的分布式一致性問題交給平臺，使業(yè)務(wù)開發(fā)更加聚焦，化繁為簡，提升系統(tǒng)的容錯能力和穩(wěn)定性。

TDXA 主要適用于 OLTP(聯(lián)機事務(wù)處理過程，多用于一線業(yè)務(wù)操作)長事務(wù)的處理場景。計費服務(wù)基于微服務(wù)的架構(gòu)，通常對于一次完整的交易流程進行多達(dá)幾十次的網(wǎng)絡(luò)調(diào)用，包括 RPC 接口、原生的 DB 接口、KV 接口等。基于高一致要求，如果由開發(fā)者自己來處理各種異常來保證高一致，代碼的復(fù)雜度和不可控性顯而易見。因此 TDXA 的核心使用價值，在于通過統(tǒng)一的組件，將一致性問題處理標(biāo)準(zhǔn)化，保證服務(wù)高一致和高質(zhì)量前提下，有效減少開發(fā)者處理錯誤或異常的工作量，滿足業(yè)務(wù)發(fā)展時交易場景多元化及交易量快速增長對計費系統(tǒng)高一致，高性能，高可靠的要求。

TDXA的正常運行特別是對超時等的處理，還有不同系統(tǒng)間的異步解耦，數(shù)據(jù)庫的數(shù)據(jù)同步，依賴于另一個核心的組件TDMQ(Tencent Distributed Message Queue)。

TDMQ 是云原生架構(gòu)設(shè)計的消息隊列，具備跨城高一致、高可靠、高性能。已廣泛應(yīng)用在騰訊計費場景，支持日均100億+的請求傳遞，包括支付通知、實時對賬、實時監(jiān)控、大數(shù)據(jù)實時分析等方面。

TDMQ云原生的一個典型特點是，支持存儲計算分離，上層計算層由獨立的broker組成，支持高性能的網(wǎng)絡(luò)訪問和topic管理，下層存儲層實現(xiàn)日志流的高一致復(fù)制。這樣就能按業(yè)務(wù)性能或容量需求分別擴展，來實現(xiàn)整體的成本最優(yōu)。TDMQ典型的功能特性還有如延遲消息、事務(wù)消息、消息追蹤、完整的多租戶支持，任意的消費者數(shù)量等，這對于高并發(fā)消費等場景友好。另外，在運營上，還支持快速的數(shù)據(jù)平滑遷移、邏輯隔離等特性，以避免多topic間生產(chǎn)消費的互相影響。

最后，作為致力于金融級核心交易一攬子解決方案的技術(shù)產(chǎn)品，在不斷深度實踐和總結(jié)的同時，也希望能通過更豐富的場景和客戶，在易用性、可管理性、性能成本比、云原生適配等方面持續(xù)的打磨和提升，而這些理念也正在騰訊內(nèi)部、投后公司、云客戶、智慧行業(yè)等領(lǐng)域持續(xù)的落地和展開，期待通過技術(shù)和產(chǎn)品的持續(xù)鍛造，TDMesh能為行業(yè)發(fā)展不斷增添新的思路和實踐案例。

生成海報

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。