騰訊云數(shù)據(jù)庫(kù)TDSQL兩大引擎全新升級(jí)，分析能力和Oracle兼容能力大幅提升

6月，騰訊云數(shù)據(jù)庫(kù)TDSQL PG版Oracle兼容能力以及TDSQL-A兩大引擎全新升級(jí)，Oracle兼容性和海量數(shù)據(jù)查詢分析能力再上新臺(tái)階，并將在公有云全面開放。

TDSQL是騰訊云企業(yè)級(jí)分布式數(shù)據(jù)庫(kù)，旗下涵蓋金融級(jí)分布式、云原生、分析型等多引擎融合的完整數(shù)據(jù)庫(kù)產(chǎn)品體系，提供業(yè)界領(lǐng)先的金融級(jí)高可用、計(jì)算存儲(chǔ)分離、數(shù)據(jù)倉(cāng)庫(kù)、企業(yè)級(jí)安全等能力。

升級(jí)后的TDSQL PG版Oracle兼容能力將進(jìn)一步降低用戶遷移改造成本，全面支持存儲(chǔ)過程、Package管理等高級(jí)特性，同時(shí)支持分布式和集中式兩種架構(gòu)，用戶可以根據(jù)業(yè)務(wù)需要從集中式無(wú)縫升級(jí)至分布式。

海量數(shù)據(jù)分析能力也迎來了全面升級(jí)，TDSQL分布式分析型引擎TDSQL-A自研列存儲(chǔ)引入延遲讀取、過濾下推、自適應(yīng)行列轉(zhuǎn)換等能力，支持更加豐富的使用場(chǎng)景。自研向量化引擎與并行執(zhí)行框架的深入優(yōu)化，帶來通用場(chǎng)景下查詢性能10倍以上提升。

Oracle兼容性大幅提升，

多項(xiàng)高級(jí)能力發(fā)布

TDSQL PG版集高并發(fā)、高性能分析、高SQL兼容度、高擴(kuò)展性、高可用性、以及企業(yè)安全審計(jì)等多項(xiàng)能力于一身。產(chǎn)品全面兼容PostgreSQL，高度兼容Oracle語(yǔ)法，采用無(wú)共享架構(gòu)，支持海量數(shù)據(jù)高并發(fā)實(shí)時(shí)在線交易和完整的事務(wù)分布式ACID能力，支持海量數(shù)據(jù)多維統(tǒng)計(jì)分析，為用戶提供容災(zāi)、備份、恢復(fù)、監(jiān)控、安全、審計(jì)等全套解決方案。

在國(guó)產(chǎn)化浪潮下，去IOE已經(jīng)逐步在政務(wù)、金融等垂直的行業(yè)場(chǎng)景落地，快速完成“去O”要求國(guó)產(chǎn)數(shù)據(jù)庫(kù)對(duì)Oracle語(yǔ)法具備極高的兼容能力，并能做到高可用、強(qiáng)一致。TDSQL PG版的Oracle兼容能力面向去O場(chǎng)景持續(xù)投入，滿足金融核心上線要求，在保險(xiǎn)和運(yùn)營(yíng)商行業(yè)Oracle兼容度高達(dá)98%以上，可以幫助政企在極短時(shí)間內(nèi)，幾乎零成本改造的情況下實(shí)現(xiàn)國(guó)產(chǎn)化。同時(shí)具備集中式、分布式多種部署模式，實(shí)現(xiàn)數(shù)據(jù)庫(kù)平滑遷移替換。

升級(jí)后的TDSQL PG版的Oracle兼容能力在支持全部數(shù)據(jù)類型、轉(zhuǎn)換函數(shù)、connect By/merge Into/pivot/unpivot等語(yǔ)法的基礎(chǔ)上，新增了數(shù)十種企業(yè)級(jí)Oracle兼容特性，包含數(shù)據(jù)類型、內(nèi)建函數(shù)、字符集、系統(tǒng)視圖、系統(tǒng)內(nèi)置包、分區(qū)表、SQL語(yǔ)法、hint、同義詞、存儲(chǔ)過程、PLSQL等，進(jìn)一步滿足不同行業(yè)企業(yè)用戶需求的同時(shí)大幅提升管控能力，打造了完整透明的運(yùn)維工具體系，提供全局session、鎖分析、快速擴(kuò)容工具等幫助企業(yè)高效管理數(shù)據(jù)。同時(shí)還支持了分布式全局索引能力，讓客戶使用和遷移更平滑順暢。

目前TDSQL PG版已在云上全面開放服務(wù)，支持分布式和集中式兩種產(chǎn)品形態(tài)。除了在私有云場(chǎng)景中服務(wù)于銀行、保險(xiǎn)、政務(wù)等行業(yè)客戶，企業(yè)亦可在公有云體驗(yàn)Oracle兼容性評(píng)估、數(shù)據(jù)遷移、數(shù)據(jù)同步、數(shù)據(jù)一致性比對(duì)、業(yè)務(wù)交割等服務(wù)，同時(shí)TDSQL PG版也支持云上與云下的平滑遷移。

圖：騰訊云數(shù)據(jù)庫(kù)TDSQL PG版的Oracle部分兼容能力示意

海量數(shù)據(jù)分析性能

實(shí)現(xiàn)10倍增強(qiáng)

隨著信息技術(shù)的發(fā)展和企業(yè)數(shù)字化轉(zhuǎn)型進(jìn)程的加速，企業(yè)要面對(duì)爆發(fā)式的數(shù)據(jù)量以及更復(fù)雜的處理需求，而傳統(tǒng)的分析型數(shù)據(jù)庫(kù)存在成本和處理能力的限制，如何做到低成本實(shí)時(shí)處理海量復(fù)雜數(shù)據(jù)成為了很多企業(yè)的迫切需求。2021年5月，TDSQL分布式分析型引擎TDSQL-A正式發(fā)布，適應(yīng)海量OLAP關(guān)聯(lián)分析查詢場(chǎng)景。

TDSQL-A，是騰訊云自主研發(fā)的分布式分析型引擎，該產(chǎn)品采用無(wú)共享架構(gòu)，具有自研高壓縮比列式存儲(chǔ)引擎和高性能的新一代向量化執(zhí)行引擎，支持行列混合存儲(chǔ)，提供高效的海量數(shù)據(jù)存儲(chǔ)和在線分析處理能力，適用于GB~PB級(jí)的海量OLAP場(chǎng)景。TDSQL-A同樣支持完整的分布式事務(wù)ACID能力，全面兼容PostgreSQL，具備多級(jí)容災(zāi)以及高安全能力。

經(jīng)過1年時(shí)間的持續(xù)打磨，分析型引擎迎來了全新升級(jí)，自研列存儲(chǔ)引入延遲讀取、過濾下推、自適應(yīng)行列轉(zhuǎn)換等多項(xiàng)性能優(yōu)化，原生支持向量化掃描。優(yōu)化后的通用場(chǎng)景壓縮比在5～10倍以上。而自研向量化引擎的全面產(chǎn)品化給產(chǎn)品換了一顆性能更強(qiáng)勁的“心臟”，結(jié)合并行執(zhí)行框架和SIMD的細(xì)致打磨，完全釋放了MPP查詢性能的潛力。通用場(chǎng)景下查詢性能可提升10倍以上。

圖：騰訊云數(shù)據(jù)庫(kù)TDSQL-A架構(gòu)圖

經(jīng)過多年發(fā)展，TDSQL系列產(chǎn)品積累了豐富的處理海量復(fù)雜數(shù)據(jù)的HTAP混合負(fù)載處理能力，廣泛支撐了騰訊內(nèi)部微信支付、騰訊音樂、騰訊地圖、廣告等業(yè)務(wù)。近年來騰訊云數(shù)據(jù)庫(kù)TDSQL將積累的經(jīng)驗(yàn)向社會(huì)開放，在政務(wù)行業(yè)，支撐了數(shù)字廣東、多省市健康碼、國(guó)家稅務(wù)總局、國(guó)家統(tǒng)計(jì)局、深圳稅務(wù)、多個(gè)智慧城市等政務(wù)民生業(yè)務(wù)。其中，在第七次全國(guó)人口普查項(xiàng)目中，支持了十億級(jí)用戶數(shù)據(jù)、海量數(shù)據(jù)高并發(fā)處理以及海量超級(jí)大表關(guān)聯(lián)高并發(fā)統(tǒng)計(jì)查詢的場(chǎng)景要求。在金融行業(yè)，廣泛投產(chǎn)應(yīng)用于興業(yè)銀行、太平洋保險(xiǎn)、陽(yáng)光保險(xiǎn)、國(guó)信證券、深圳稅務(wù)等多家大型金融機(jī)構(gòu)國(guó)產(chǎn)化替換場(chǎng)景，助力行業(yè)更加高效、低成本推進(jìn)數(shù)字化進(jìn)程。