上訊敏捷數(shù)據(jù)管理平臺(tái)(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案。該產(chǎn)品通過自動(dòng)化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了備份數(shù)據(jù)的潛在價(jià)值。實(shí)現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi)、備份數(shù)據(jù)自動(dòng)化恢復(fù)與有效性驗(yàn)證、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***。
敏捷數(shù)據(jù)管理平臺(tái)ADM的核*專*技術(shù)——數(shù)據(jù)庫虛擬化技術(shù)。備份業(yè)務(wù)需求側(cè)
功能節(jié)點(diǎn)統(tǒng)一管理,支持彈性擴(kuò)展ADM采用多節(jié)點(diǎn)高可用部署架構(gòu),保障數(shù)據(jù)服務(wù)高可用,并消除單節(jié)點(diǎn)故障導(dǎo)致的業(yè)務(wù)不可用問題,確保數(shù)據(jù)服務(wù)連續(xù)性。采用Scale-out架構(gòu),根據(jù)業(yè)務(wù)發(fā)展規(guī)模,按需擴(kuò)展集群節(jié)點(diǎn),無需停止服務(wù),靈活滿足業(yè)務(wù)需求。同時(shí),ADM支持存儲(chǔ)池容量的彈性擴(kuò)充,滿足不斷增長的數(shù)據(jù)存儲(chǔ)需求。(2)數(shù)據(jù)存儲(chǔ)成本倍數(shù)級(jí)節(jié)約,提升數(shù)據(jù)存儲(chǔ)環(huán)節(jié)的效能首先,數(shù)據(jù)備份面臨存儲(chǔ)成本高的問題,ADM采用內(nèi)置高效的壓縮存儲(chǔ)池存放數(shù)據(jù),壓縮比約為3:1,存儲(chǔ)即壓縮,***降低了備份數(shù)據(jù)的存儲(chǔ)成本;其次,通過ADM的數(shù)據(jù)庫虛擬化技術(shù),一份基礎(chǔ)數(shù)據(jù)即可快速拉起多份虛擬數(shù)據(jù)庫,由于虛擬數(shù)據(jù)庫90%的數(shù)據(jù)均與原始數(shù)據(jù)相同,因此拉起時(shí)幾乎不占用額外的物理存儲(chǔ)空間,*對(duì)新增的寫操作計(jì)入容量占用,因此,隨著數(shù)據(jù)分發(fā)使用的場景和頻率增加,虛擬庫的數(shù)量越來越多,而存儲(chǔ)成本將會(huì)呈倍數(shù)級(jí)節(jié)約,例如針對(duì)同一份數(shù)據(jù)創(chuàng)建N個(gè)虛擬庫,傳統(tǒng)方法需要N倍的存儲(chǔ)空間占用,而通過ADM只需要占用近乎0TB的存儲(chǔ)空間,**節(jié)約了數(shù)據(jù)存儲(chǔ)環(huán)節(jié)的資源和成本。高質(zhì)量發(fā)展ADM針對(duì)數(shù)據(jù)的獲取采用壓縮存儲(chǔ)的方式,存儲(chǔ)池可壓縮至原來的三分之一,大*節(jié)約了數(shù)據(jù)存儲(chǔ)的成本。
敏捷數(shù)據(jù)管理平臺(tái)(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、敏感數(shù)據(jù)處理、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲(chǔ)成本。ADM由數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理管理組成,實(shí)現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲(chǔ)管理和數(shù)據(jù)流程管理,通過自動(dòng)化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價(jià)值。
ADM產(chǎn)品數(shù)據(jù)安全***ADM平臺(tái)支持靜態(tài)數(shù)據(jù)脫敏(涉及數(shù)據(jù)庫、格式化文件、數(shù)據(jù)庫對(duì)象、消息隊(duì)列等),內(nèi)置104條***算法、47條敏感信息類型匹配庫,覆蓋個(gè)人身份信息、組織機(jī)構(gòu)信息、資質(zhì)資格證信息、金融數(shù)據(jù)信息、醫(yī)療數(shù)據(jù)信息、車輛數(shù)據(jù)信息等眾多類別的敏感數(shù)據(jù)類型識(shí)別與仿真***。具備廣義的通用型***規(guī)則,包括字符替換、隨機(jī)生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型***規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號(hào)、證件號(hào)、地址、組織機(jī)構(gòu)代碼等***后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)***和基于ETL的抽取***,提供文件***添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足用戶多種***需求。ADM的數(shù)據(jù)遠(yuǎn)程復(fù)制主要解決數(shù)據(jù)全生命周期管理中數(shù)據(jù)傳輸流轉(zhuǎn)的安全問題,實(shí)現(xiàn)數(shù)據(jù)安全跨域傳輸?shù)哪繕?biāo)。
上訊敏捷數(shù)據(jù)管理平臺(tái)適用場景:數(shù)據(jù)交付速度慢的開發(fā)測試部門企業(yè)通過交付生產(chǎn)數(shù)據(jù)輔助第三方業(yè)務(wù)決策,如開發(fā)/測試環(huán)境、統(tǒng)計(jì)分析、準(zhǔn)業(yè)務(wù)系統(tǒng)環(huán)境搭建等,交付生產(chǎn)數(shù)據(jù)的方式是通過生成業(yè)務(wù)系統(tǒng)數(shù)據(jù)副本,而副本的準(zhǔn)備通常需要幾小時(shí),甚至幾天不等,嚴(yán)重拖延了項(xiàng)目進(jìn)度。
備份數(shù)據(jù)的有效性驗(yàn)證效率低的運(yùn)維部門,大部分企業(yè)對(duì)其**業(yè)務(wù)系統(tǒng)進(jìn)行了數(shù)據(jù)備份,為了檢驗(yàn)備份數(shù)據(jù)的有效性,以及滿足相關(guān)法律法規(guī)的要求,企業(yè)對(duì)備份數(shù)據(jù)采取周期性的恢復(fù)驗(yàn)證;由于企業(yè)的業(yè)務(wù)系統(tǒng)繁多,而人員相對(duì)緊缺,驗(yàn)證工作需要大量重復(fù)性動(dòng)作,成為企業(yè)當(dāng)前面臨的一大挑戰(zhàn)。
數(shù)據(jù)副本分散存放難以管理的數(shù)據(jù)中心數(shù)據(jù)副本一旦被交付使用,就**存在于使用環(huán)境中,隨著數(shù)據(jù)使用場景的日益增多,數(shù)據(jù)副本在非生產(chǎn)環(huán)境中逐漸累積,**分散的存放方式導(dǎo)致副本的辨識(shí)度不高,后續(xù)使用與銷毀難度明顯增大。同時(shí),重復(fù)存放現(xiàn)象嚴(yán)重造成了存儲(chǔ)資源的浪費(fèi)。u隱私數(shù)據(jù)泄露風(fēng)險(xiǎn)高的用戶無論是通過生產(chǎn)數(shù)據(jù)庫導(dǎo)出,還是通過備份系統(tǒng)恢復(fù),都能夠直接獲取到企業(yè)的**生產(chǎn)數(shù)據(jù),其中包含企業(yè)內(nèi)部機(jī)密數(shù)據(jù)和客戶個(gè)人隱私信息,一旦發(fā)生泄露將帶來嚴(yán)重后果,不僅影響企業(yè)的名譽(yù),也會(huì)造成一定的經(jīng)濟(jì)損失。 ADM可使數(shù)據(jù)分鐘級(jí)提供,提升數(shù)據(jù)交付效率縮短開發(fā)周期。CDM應(yīng)用在金融行業(yè)開發(fā)測試場景
ADM主要由數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、數(shù)據(jù)脫*管理四大功能模塊組成。備份業(yè)務(wù)需求側(cè)
數(shù)據(jù)資源可視化管理,有效滿足上中下游數(shù)據(jù)的政策合規(guī)ADM平臺(tái)具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,將***過的數(shù)據(jù)進(jìn)行分組管理,從下游測試數(shù)據(jù)管理的源頭管控?cái)?shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源----中游數(shù)據(jù)中轉(zhuǎn)----下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動(dòng)化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時(shí),ADM提供對(duì)數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲(chǔ)池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級(jí)關(guān)系,方便對(duì)系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,**幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化數(shù)據(jù)資源的合理分配,可視化功能的動(dòng)態(tài)展示將助力企業(yè)向著智能化數(shù)據(jù)安全治理的方向轉(zhuǎn)型。備份業(yè)務(wù)需求側(cè)