并行重刪技術(shù)是在多個不同的節(jié)點上構(gòu)建指紋庫,并將指紋并行分布于多個節(jié)點,采用內(nèi)存級指紋庫進(jìn)行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導(dǎo)致的隨機(jī)IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復(fù)的數(shù)據(jù),該技術(shù)適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機(jī)等不同應(yīng)用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點性能和存儲空間壓力。海量數(shù)據(jù)供數(shù)于下游開發(fā)測試統(tǒng)計分析場景的數(shù)據(jù)使用需求該如何滿足?金融信息
通過敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的部署實施,采用數(shù)據(jù)庫虛擬化技術(shù),快速將數(shù)據(jù)交付到開發(fā)、測試網(wǎng),有效減少開發(fā)、測試場景中測試數(shù)據(jù)的準(zhǔn)備時間,提高了開發(fā)、測試環(huán)境搭建的效率。ADM內(nèi)置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本,只需一份基礎(chǔ)數(shù)據(jù)源,即可快速拉起多份虛擬數(shù)據(jù)庫,節(jié)約了存儲成本10倍以上。ADM通過虛擬數(shù)據(jù)庫快照功能,可以靈活地對虛擬數(shù)據(jù)庫的狀態(tài)進(jìn)行管理和維護(hù)。使用人員可以隨時保存當(dāng)前的數(shù)據(jù)庫使用狀態(tài),用于開發(fā)、測試的數(shù)據(jù)版本迭代。備份數(shù)據(jù)的利用價值基于哪些方面選擇CDM產(chǎn)品的廠商?
通過智能定義敏感數(shù)據(jù)類型,自動發(fā)現(xiàn)和識別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈活排序減少人為篩選,定位敏感數(shù)據(jù)源。豐富的算法與仿真的字典庫相結(jié)合,保證處理后數(shù)據(jù)仍具有業(yè)務(wù)屬性,數(shù)據(jù)表間關(guān)系仍具有業(yè)務(wù)一致性,不影響數(shù)據(jù)挖掘分析數(shù)據(jù)價值。對涉及企業(yè)、個人信息的隱私數(shù)據(jù),包括資金財產(chǎn)、個人、企業(yè)隱私的對照關(guān)系進(jìn)行敏感數(shù)據(jù)識別,通過內(nèi)置的規(guī)則進(jìn)行處理,將數(shù)據(jù)敏感部分去隱私化,但并不失去數(shù)據(jù)挖掘的價值特征,減少數(shù)據(jù)隱私泄露帶來的風(fēng)險和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件。
數(shù)據(jù)副本管理是ADM功能模塊之一,可單獨作為企業(yè)級副本數(shù)據(jù)管理(CDM)產(chǎn)品。為應(yīng)對當(dāng)前復(fù)雜的IT環(huán)境,ADM提出集云、物理、虛擬為一體的,面向結(jié)構(gòu)化數(shù)據(jù)庫、非結(jié)構(gòu)化數(shù)據(jù)、虛擬化和云平臺的***數(shù)據(jù)副本分發(fā)與交付管理解決方案。主要通過數(shù)據(jù)副本管理的核心專利技術(shù)——數(shù)據(jù)庫虛擬化技術(shù)對源數(shù)據(jù)進(jìn)行CDM原格式獲取生成黃金副本、存儲黃金副本作為基準(zhǔn)數(shù)據(jù)、虛擬化為多個副本掛載恢復(fù),**終達(dá)到快速交付副本數(shù)據(jù)、靈活管理副本數(shù)據(jù)版本、集中管理副本數(shù)據(jù)存儲與流轉(zhuǎn)的目標(biāo),是主要面向企業(yè)數(shù)據(jù)運維、軟件開發(fā)測試部門解決自動化閉環(huán)取數(shù)供數(shù)、測試數(shù)據(jù)快速交付等典型應(yīng)用場景的問題。副本數(shù)據(jù)管理CDM產(chǎn)品與數(shù)據(jù)備份產(chǎn)品的區(qū)別?
隨著信息化程度的不斷深入,數(shù)據(jù)作為企業(yè)的資產(chǎn)越來越被重視,虛擬化、云化的不斷應(yīng)用,帶來了業(yè)務(wù)系統(tǒng)及數(shù)據(jù)的增長,大數(shù)據(jù)在這種環(huán)境中也有了發(fā)展和應(yīng)用。新技術(shù)的不斷創(chuàng)新與應(yīng)用,促使著數(shù)據(jù)不斷的被拷貝使用,如何能更好的使用這些數(shù)據(jù),如何更好的管理越來越多的拷貝數(shù)據(jù),如何能節(jié)省新需求下的存儲空間,這些都成了當(dāng)下亟待解決的問題。信息化時代,“數(shù)據(jù)”的應(yīng)用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)據(jù)在沒有發(fā)生故障時往往是被擱置不用的,被稱為“暗數(shù)據(jù)”。而對業(yè)務(wù)數(shù)據(jù)的分析、統(tǒng)計、運維等操作都會直接作用在業(yè)務(wù)服務(wù)器,如此將會對業(yè)務(wù)性能產(chǎn)生影響,不利于業(yè)務(wù)系統(tǒng)的高效使用。如何做到解放業(yè)務(wù)系統(tǒng),使其專注于業(yè)務(wù)處理上,也是IT管理者需要考慮的另一個現(xiàn)實問題。上訊信息敏捷數(shù)據(jù)管理平臺ADM榮獲2023年網(wǎng)信自主創(chuàng)新“尖鋒榜”產(chǎn)品獎。數(shù)據(jù)編碼規(guī)則
上訊信息敏捷數(shù)據(jù)管理平臺為企業(yè)上中下游數(shù)據(jù)的高效使用、安全管控提供了一套綜合數(shù)據(jù)安全治理解決方案。金融信息
數(shù)據(jù)流程管理是ADM功能模塊之一,主要通過靈活配置數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)實現(xiàn)數(shù)據(jù)管理流程的自動化作業(yè)編排,ADM采用基于畫布的方式默認(rèn)作業(yè)流程的起止節(jié)點,根據(jù)實際需求將數(shù)據(jù)的獲取、恢復(fù)、傳輸、共享、交付、銷毀等各個環(huán)節(jié)對應(yīng)的任務(wù)組件靈活拖動到作業(yè)畫布,組成一個完整的任務(wù)流程,各任務(wù)之間支持依賴關(guān)系、延時機(jī)制以及斷點處理機(jī)制,實現(xiàn)數(shù)據(jù)管理流程任務(wù)的串聯(lián)組建和并行執(zhí)行,達(dá)到數(shù)據(jù)管理流程的自動化執(zhí)行,協(xié)助用戶將數(shù)據(jù)交付流程的各個工作環(huán)節(jié)靈活地組合起來,實現(xiàn)數(shù)據(jù)交付的自動化,從而擺脫人工值守,達(dá)到縮減時間成本和人力成本的目標(biāo)。金融信息