信息化時代,“數(shù)據(jù)”的應用較為頻繁,海量數(shù)據(jù)的組成中,備份數(shù)據(jù)占有很大比例,而這些備份數(shù)據(jù)在沒有發(fā)生故障時往往是被擱置不用的,被稱為“暗數(shù)據(jù)”。而對業(yè)務數(shù)據(jù)的分析、統(tǒng)計、運維等操作都會直接作用在業(yè)務服務器,如此將會對業(yè)務性能產(chǎn)生影響,不利于業(yè)務系統(tǒng)的高效使用。如何做到解放業(yè)務系統(tǒng),使其專注于業(yè)務處理上,也是IT管理者需要考慮的另一個現(xiàn)實問題。備份需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù),統(tǒng)計、分析需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù),研發(fā)、測試需要從業(yè)務系統(tǒng)中獲取數(shù)據(jù)。這些數(shù)據(jù)從業(yè)務系統(tǒng)中拷貝出來后,如果得不到有效的管控,將會給企業(yè)帶來安全隱患,這也是用戶需要考慮解決的又一現(xiàn)實問題。上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的數(shù)據(jù)備份模塊通過創(chuàng)建虛擬副本實現(xiàn)了本機、異機的即時掛載恢復。驗證策略
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復數(shù)據(jù)刪除技術,在典型的重復數(shù)據(jù)刪除技術中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務級與全局指紋庫提供自適應源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡傳輸與存儲開銷,在源端設置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,目的在于不備份任意一個冗余數(shù)據(jù)。開發(fā)利用過程中上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術,從而減少需要備份的數(shù)據(jù)量、縮短備份窗口。
上訊敏捷數(shù)據(jù)管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務器,實現(xiàn)恢復服務器、數(shù)據(jù)恢復策略、數(shù)據(jù)驗證策略和存儲資源的集中管理,包括:(1)存儲池自動準備存儲空間、自動調(diào)度創(chuàng)建恢復服務器;(2)按照參數(shù)設置恢復策略、自動執(zhí)行恢復計劃、自動驗證恢復數(shù)據(jù);(3)恢復驗證任務結束后,自動清理恢復環(huán)境,釋放存儲資源和恢復服務器資源,用于下一個恢復驗證任務的使用,使整個數(shù)據(jù)備份恢復驗證工作能夠高效節(jié)能地循環(huán)利用,達到集中統(tǒng)一的安全管理。
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持并行重刪技術,通過在多個不同的節(jié)點上構建指紋庫,并將指紋并行分布于多個節(jié)點,采用內(nèi)存級指紋庫進行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導致的隨機IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復的數(shù)據(jù),該技術適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機等不同應用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點性能和存儲空間壓力。上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持仿真的敏感數(shù)據(jù)處理。
通過敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品的部署實施,采用數(shù)據(jù)庫虛擬化技術,快速將數(shù)據(jù)交付到開發(fā)、測試網(wǎng),有效減少開發(fā)、測試場景中測試數(shù)據(jù)的準備時間,提高了開發(fā)、測試環(huán)境搭建的效率。ADM內(nèi)置獨有的高效壓縮存儲池,平均壓縮比3:1,存儲即壓縮,降低了基礎數(shù)據(jù)源獲取的存儲成本,只需一份基礎數(shù)據(jù)源,即可快速拉起多份虛擬數(shù)據(jù)庫,節(jié)約了存儲成本10倍以上。ADM通過虛擬數(shù)據(jù)庫快照功能,可以靈活地對虛擬數(shù)據(jù)庫的狀態(tài)進行管理和維護。使用人員可以隨時保存當前的數(shù)據(jù)庫使用狀態(tài),用于開發(fā)、測試的數(shù)據(jù)版本迭代。副本數(shù)據(jù)管理CDM產(chǎn)品與數(shù)據(jù)備份產(chǎn)品的區(qū)別?模糊化
敏捷數(shù)據(jù)管理平臺虛擬數(shù)據(jù)秒級分發(fā),提升了環(huán)境準備效率,數(shù)據(jù)交付時間整體節(jié)約100倍以上。驗證策略
近年來,證券業(yè)務快速發(fā)展,信息系統(tǒng)變更日益頻繁,敏捷開發(fā)、快速迭代已經(jīng)成為支持業(yè)務創(chuàng)新的必要條件。數(shù)據(jù)庫作為信息系統(tǒng)運行的重要支撐,數(shù)據(jù)準備和交付的自動化程度對系統(tǒng)開發(fā)、測試效率有大的影響。Gartner對CDM的定義是,它從生產(chǎn)環(huán)境通過快照技術獲取有應用一致性保證的數(shù)據(jù),在非生產(chǎn)存儲上生成“黃金副本”(GoldenImage),這個“黃金副本”數(shù)據(jù)格式是原始的磁盤格式,可再虛擬化成多個副本直接掛載給服務器,分別用于備份恢復、容災或開發(fā)測試等.驗證策略