上訊敏捷數(shù)據(jù)管理平臺(ADM)支持增量備份與全量快照合成技術(shù),傳統(tǒng)的備份方案大多采用周期性的“全量備份+增量備份”策略,其增量備份大多不可持續(xù),經(jīng)過一段時間就必須執(zhí)行一次全量備份。因而傳統(tǒng)的備份方案經(jīng)常面臨備份窗口過大的問題,而且其增量備份數(shù)據(jù)的恢復效率相對低下,因為每個時間點的恢復都依賴于上一次全備副本和上一次全備副本后的所有增量數(shù)據(jù),恢復操作需要進行逐個迭代恢復。此外,過期增量數(shù)據(jù)的清理操作也受限于備份副本之間的依賴關(guān)系,不一定能及時被清理。而增量備份與全量快照合成技術(shù),即首先執(zhí)行全量備份,之后只對新增或改動過的數(shù)據(jù)進行增量備份,此增量備份數(shù)據(jù)是持續(xù)的,而且每個增量備份的數(shù)據(jù)副本將自動合成為全量快照副本,便于恢復。因此,增量備份與全量快照合成技術(shù)能夠大幅度減少備份時間,節(jié)省備份數(shù)據(jù)所需的存儲空間,且提升了恢復效率。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品能對接NBU直接恢復。節(jié)約存儲采購成本
ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進行分組劃分的功能,將數(shù)據(jù)進行分組管理,從下游測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源----中游數(shù)據(jù)中轉(zhuǎn)----下游數(shù)據(jù)目標的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負責人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時,ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓撲結(jié)構(gòu)圖,可詳細了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預覽,通過可視化的結(jié)構(gòu)拓撲圖,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化數(shù)據(jù)資源的合理分配,可視化功能的動態(tài)展示將助力企業(yè)向著智能化數(shù)據(jù)安全治理的方向轉(zhuǎn)型。節(jié)約存儲采購成本上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品能對接NBU自動恢復。
并行重刪技術(shù)是在多個不同的節(jié)點上構(gòu)建指紋庫,并將指紋并行分布于多個節(jié)點,采用內(nèi)存級指紋庫進行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導致的隨機IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復的數(shù)據(jù),該技術(shù)適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機等不同應用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點性能和存儲空間壓力。
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復數(shù)據(jù)刪除技術(shù),在典型的重復數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務級與全局指紋庫提供自適應源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡傳輸與存儲開銷,在源端設置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,目的在于不備份任意一個冗余數(shù)據(jù)。上訊ADM產(chǎn)品通過虛擬數(shù)據(jù)秒級分發(fā)功能實現(xiàn)測試數(shù)據(jù)的同時在線交付,縮短了數(shù)據(jù)交付的時間。
上訊敏捷數(shù)據(jù)管理平臺ADM可實現(xiàn)針對數(shù)據(jù)庫的數(shù)據(jù)保護,ADM采用圖形化向?qū)讲僮?,無需用戶手動執(zhí)行備份和恢復腳本,簡化了備份恢復的難度。既支持傳統(tǒng)的無掛載備份,也支持全量備份、后續(xù)增量備份與全量快照合成、事務日志同步相結(jié)合的方式。數(shù)據(jù)庫備份的基本流程如下:通過管理控制中心(Master)的Web管理頁面推送客戶端(Client)軟件到需要保護的生產(chǎn)服務器上,自動完成客戶端軟件的安裝和注冊,與Server服務器端保持通訊??蛻舳藢⒆R別生產(chǎn)服務器中的數(shù)據(jù)庫數(shù)據(jù),并通過備份API讀取數(shù)據(jù)庫數(shù)據(jù),然后將其傳輸至數(shù)據(jù)服務節(jié)點完成備份。管理控制中心(Master)負責向客戶端軟件和服務節(jié)點發(fā)送控制信息,管理整個備份任務的運行。例如:Oracle數(shù)據(jù)庫采用RMAN接口進行多通道并行備份,備份粒度支持整個實例備份,恢復粒度支持細化到選定表恢復。上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的數(shù)據(jù)備份模塊通過創(chuàng)建虛擬副本實現(xiàn)了本機、異機的即時掛載恢復。需求側(cè)的業(yè)務變更
上訊ADM產(chǎn)品的數(shù)據(jù)備份模塊實現(xiàn)了數(shù)據(jù)庫、文件、虛擬化平臺的備份恢復。節(jié)約存儲采購成本
備份需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù),統(tǒng)計、分析需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù),研發(fā)、測試需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù)。這些數(shù)據(jù)從業(yè)務系統(tǒng)中拷貝出來后,如果得不到有效的管控,將會給企業(yè)帶來安全隱患,這也是用戶需要考慮解決的又一現(xiàn)實問題。基于上述問題的考慮,I T負責人迫切需要一種既可以解放業(yè)務系統(tǒng),又可以對測試環(huán)境數(shù)據(jù)的采集、傳輸、存儲、使用及流轉(zhuǎn)等關(guān)鍵環(huán)節(jié)進行效率和安全雙重保障的平臺化產(chǎn)品,由此上訊敏捷數(shù)據(jù)管理平臺ADM應運而生。節(jié)約存儲采購成本