PB 級數(shù)據(jù)倉庫 | GaussDB(DWS) 超大規(guī)模數(shù)據(jù)保護最佳實踐
發(fā)布人：scutech 發(fā)布日期：2025-03-25 12:06:15 點擊數(shù)：143
隨著數(shù)字化轉(zhuǎn)型的加速，各行業(yè)業(yè)務(wù)場景日趨豐富，海量數(shù)據(jù)從交易系統(tǒng)、物聯(lián)網(wǎng)設(shè)備、用戶行為等渠道持續(xù)涌入，數(shù)據(jù)規(guī)模呈現(xiàn)爆炸式增長，數(shù)據(jù)倉庫應(yīng)運而生。華為云數(shù)據(jù)倉庫GaussDB(DWS)憑借高并發(fā)查詢能力、行列混合存儲、向量化引擎等技術(shù)，可實現(xiàn) PB 級數(shù)據(jù)秒級分析，目前已廣泛服務(wù)于金融、電信、能源等行業(yè)，成為國產(chǎn)首選的數(shù)據(jù)倉庫解決方案。
而超大規(guī)模 GaussDB(DWS)的數(shù)據(jù)保護方案，往往面臨備份數(shù)據(jù)巨大、備份窗口過長、恢復(fù)準(zhǔn)確度低、性能調(diào)優(yōu)不便等困難。鼎甲 DBackup 作為華為長期的合作伙伴，與華為云深度融合開發(fā)，推出 XBSA 流式 GaussDB(DWS)數(shù)據(jù)倉庫保護方案，打破上述備份難題，并于兩年前順利上線國內(nèi)頭部銀行 1.6PB 超大規(guī)模 GaussDB(DWS)，且穩(wěn)定運行至今。
1. DBackup × GaussDB(DWS)?，保護方案四大核心優(yōu)勢
一、精細化備份恢復(fù)
支持庫、表、schema 級的靈活備份恢復(fù)，精準(zhǔn)定位目標(biāo)數(shù)據(jù)，恢復(fù)效率提升 80%。
二、云原生性能調(diào)優(yōu)
深度融合的云原生備份工具 Roach，專為多種業(yè)務(wù)場景設(shè)計，提供了 10 項關(guān)鍵的性能調(diào)優(yōu)參數(shù)，以確保卓越的性能表現(xiàn)。
三、分布式重復(fù)數(shù)據(jù)刪除
采用分布式重刪架構(gòu)，為多節(jié)點模式下的 GaussDB(DWS) 集群提供數(shù)據(jù)保護，并支持負載均衡調(diào)度、故障容錯機制和在線擴展能力。項目實測數(shù)據(jù)顯示，備份重刪比平均可達 86%。
四、官方認證解決方案
國內(nèi)頭部銀行在其核心業(yè)務(wù)中采用 GaussDB(DWS)，系統(tǒng)架構(gòu)超 150 個數(shù)據(jù)節(jié)點，日需高效處理數(shù)十億級別的交易記錄，累積高達 1.6PB 的數(shù)據(jù)量。面對如此超大規(guī)模集群，客戶期望數(shù)據(jù)保護能實現(xiàn)以下優(yōu)化目標(biāo)：
●?快速備份恢復(fù)——2 小時備份窗口，TB 級數(shù)據(jù)在分鐘級恢復(fù)；
● 精準(zhǔn)數(shù)據(jù)保護——需支持細粒度恢復(fù)，如：單表恢復(fù)；
●?高效存儲管理——重刪比高，大幅度節(jié)省備份數(shù)據(jù)的存儲成本。
實施方案
鼎甲 DBackup 結(jié)合客戶實際組網(wǎng)架構(gòu)與軟硬件要求，打造如下部署方案：
國內(nèi)頭部銀行在其核心業(yè)務(wù)中采用 GaussDB(DWS)，系統(tǒng)架構(gòu)超 150 個數(shù)據(jù)節(jié)點，日需高效處理數(shù)十億級別的交易記錄，累積高達 1.6PB 的數(shù)據(jù)量。面對如此超大規(guī)模集群，客戶期望數(shù)據(jù)保護能實現(xiàn)以下優(yōu)化目標(biāo)：
1、非侵入式部署：備份組網(wǎng)無需在 GaussDB(DWS) 節(jié)點上安裝代理軟件，僅需要在獨立的服務(wù)器或存儲服務(wù)器上配置備份主機，用于連接 GaussDB(DWS) 和備份系統(tǒng)?，F(xiàn)場實施中，僅部署 12 臺備份主機，即滿足 150+ GaussDB(DWS) 集群節(jié)點的并行備份要求。
2、分布式重刪： 備份系統(tǒng)采用分布式重刪架構(gòu)，通過構(gòu)建 48 節(jié)點的重刪存儲池和極致的重刪比，有效承載 1.6PB 業(yè)務(wù)數(shù)據(jù)經(jīng)備份生成的多份歷史副本。
3、TCO 低：項目采用萬兆網(wǎng)卡和低成本的機械硬盤，而非 25/40G 高性能網(wǎng)絡(luò)和 SSD 硬盤，通過高效的備份軟件，實現(xiàn)備份數(shù)據(jù)高速傳輸與持久化存儲。
實現(xiàn)效果
●?高吞吐備份：生產(chǎn)環(huán)境增量備份平均速度可達 9.62 GiB/s
●?分鐘級恢復(fù)：1 分鐘內(nèi)精準(zhǔn)恢復(fù) 200GB 表，滿足金融行業(yè)嚴(yán)苛的 RPO 要求
●?極致重刪壓縮比：完全備份重刪率最高可達 99%
●?上線至今 0 故障，穩(wěn)定運行超 18 個月！
面對蓬勃發(fā)展的大數(shù)據(jù)浪潮，數(shù)據(jù)保護已成為永恒的話題。鼎甲推出的華為云數(shù)據(jù)倉庫 GaussDB(DWS) 保護方案，在功能細化與性能方面表現(xiàn)卓越，并歷經(jīng)超大規(guī)模場景下的打磨，成為業(yè)界數(shù)倉保護的新標(biāo)桿！
更多 DBackup 支持 GaussDB(DWS) 功能細節(jié)，可閱讀：
DBackup 新版：高性能 GaussDB(DWS) 非侵入式方案，引領(lǐng)業(yè)界國產(chǎn)數(shù)倉保護！
