上(shàng)訊信息 爲CDM敏捷數據而生

統計(jì)顯示，平均每個企業要爲應用(yòng)開(kāi)發、QA、用(yòng)戶驗收、産品支持、報(bào)告和(hé)備份等，從(cóng)生産數據源創建8-10份數據副本。因此，以一個5TB的生産數據庫爲例，往往要爲下(xià)遊創建出40-50TB的數據副本。一家500強企業甚至擁有超過上(shàng)千個生産數據庫，數據副本達到(dào)PB級規模。

大(dà)量的數據副本存在不可避免地造成了(le)一定程度的資源浪費以及維護開(kāi)銷的增長，有數據表明(míng)，企業80%的存儲能(néng)力都被次級數據所使用(yòng)。

援引自(zì)IDC的數據也(yě)顯示，目前每年在Copy Data上(shàng)的開(kāi)銷達到(dào)460億美(měi)元，企業内的數據副本消耗了(le)60%的存儲空(kōng)間，并且65%的存儲軟件和(hé)85%存儲采購由此産生。

資料來(lái)源：IDC

不僅如此，在傳統的生産協作(zuò)流程中，當開(kāi)發和(hé)測試人員想要獲取必須的數據副本時(shí)，往往需要從(cóng)提交申請(qǐng)，到(dào)完全準備好(hǎo)環境，耗時(shí)幾天甚至以月爲單位（數據交付時(shí)間視(shì)數據規模，環境準備情況等而定）。

這(zhè)樣的數據管理(lǐ)實踐并非最佳，不僅大(dà)量浪費了(le)存儲資源，而且還帶來(lái)了(le)數據合規和(hé)敏捷性等方面的問題，影響了(le)用(yòng)戶應用(yòng)程序的快(kuài)速叠代，這(zhè)對(duì)于今天追求敏捷轉型和(hé)DevOps轉型的企業而言難以接受。

爲了(le)幫助企業統一管理(lǐ)海量的非關鍵性數據，尤其是冗餘的數據副本，業界采用(yòng)了(le)CDM技術。什(shén)麽是CDM？它的主要應用(yòng)場景又是什(shén)麽？Gartner對(duì)此提出：它從(cóng)生産環境通過快(kuài)照技術獲取有應用(yòng)一緻性保證的數據，在非生産存儲上(shàng)生成“黃金(jīn)副本”（Golden Image），這(zhè)個“黃金(jīn)副本”數據格式是原始的磁盤格式，可再虛拟化成多個副本直接挂載給服務器，分别用(yòng)于備份恢複、容災或開(kāi)發測試。

Gartner《Hype Cycle for Storage and Data Protection Technologies, 2020》報(bào)告指出，CDM技術已經度過了(le)了(le)早期的技術炒作(zuò)期，目前處于“泡沫化的低(dī)谷期”（trough of disillusionment），這(zhè)從(cóng)側面說明(míng)一些(xiē)客戶開(kāi)始在非關鍵性業務場景集中部署這(zhè)項技術，而且Gartner也(yě)預測CDM技術将在未來(lái)5-10年内進入“實質生産的高(gāo)峰期”（plateau of productivity）。

聚焦到(dào)CDM技術實現(xiàn)的業務價值，主要體現(xiàn)在以下(xià)幾個方面：

第一，降低(dī)存儲成本。利用(yòng)數據虛拟化技術，單個數據副本即可滿足開(kāi)發、測試、備份、恢複、數據脫敏、統計(jì)分析等多種工(gōng)作(zuò)負載需求，同時(shí)利用(yòng)高(gāo)效的數據壓縮技術，進一步節省了(le)存儲空(kōng)間，減少企業不必要的存儲開(kāi)支（以下(xià)圖上(shàng)訊信息ADM産品數據拷貝方式爲例）。

ADM數據拷貝方式，資料來(lái)源：上(shàng)訊信息

第二，縮短數據交付周期。數據準備從(cóng)原來(lái)的按天或者月爲單位，縮短到(dào)分鐘(zhōng)級，數據分發達到(dào)秒級。基于CDM技術的數據副本的交付與管理(lǐ)，大(dà)大(dà)節省了(le)數據交付的時(shí)間，爲企業構建了(le)更加敏捷的數據管理(lǐ)基礎架構，加速了(le)企業的DevOps建設，縮短了(le)業務的開(kāi)發測試周期，實現(xiàn)了(le)産品的快(kuài)速叠代。

第三，降低(dī)人力時(shí)間投入。傳統方式下(xià)，數據的導入和(hé)導出無法自(zì)動完成，面對(duì)開(kāi)發和(hé)測試人員的需求，需要通過人爲的傳遞才能(néng)完成數據從(cóng)生産環境到(dào)測試環境的遷移，而且這(zhè)個過程中還可能(néng)需要持續的獲取增量數據資源。CDM技術實現(xiàn)了(le)全流程的自(zì)動化配置和(hé)編排，從(cóng)審批到(dào)數據的導入和(hé)導出，這(zhè)個過程隻需要在統一的管理(lǐ)界面上(shàng)鼠标點擊操作(zuò)，幾步即可自(zì)動完成，極大(dà)減輕了(le)存儲管理(lǐ)員和(hé)DBA的工(gōng)作(zuò)負荷，降低(dī)人力時(shí)間投入。

第四，提升數據集中管控能(néng)力。過去，數據移交到(dào)使用(yòng)部門(mén)之後，管控權利完全在使用(yòng)部門(mén)，隻能(néng)用(yòng)流程來(lái)控制數據的用(yòng)後銷毀，存在較高(gāo)的安全管控風(fēng)險。CDM融合了(le)數據動态和(hé)靜态脫敏，權限管控，合規審計(jì)等多種數據保護策略，以集中的數據管控，防範敏感數據洩露，杜絕不當或者誤操作(zuò)，以及保留事(shì)後的可追溯。交付使用(yòng)的數據，可以通過CDM管控平台實現(xiàn)數據的統一集中管控，杜絕測試數據出現(xiàn)數據孤島，在數據使用(yòng)完之後，可以實現(xiàn)數據的快(kuài)速回收以釋放(fàng)占用(yòng)資源，杜絕暗數據的出現(xiàn)。

在國内，備份和(hé)CDM容易被混淆，有不少備份廠(chǎng)商在其備份産品上(shàng)通過增加一些(xiē)CDM功能(néng)，作(zuò)爲備份的補充，比如用(yòng)作(zuò)快(kuài)速拉起恢複或者備份校驗，也(yě)許從(cóng)用(yòng)戶肉眼可見的角度看(kàn)，功能(néng)上(shàng)都歸整到(dào)了(le)統一的界面上(shàng)，但(dàn)實際上(shàng)二者的後台邏輯相差甚遠。

備份從(cóng)根本上(shàng)是作(zuò)爲數據的保底存在，一旦發生物理(lǐ)或邏輯故障，爲用(yòng)戶提供了(le)災難恢複的手段。而CDM側重于對(duì)數據的生命周期管理(lǐ)，是牽涉到(dào)用(yòng)戶數據獲取，數據存儲，數據使用(yòng)的全流程的生産力工(gōng)具。

傳統備份技術是将數據恢複後交付使用(yòng)，恢複的過程很(hěn)長，而CDM保存的是原始格式數據，可以直接交付使用(yòng)。

從(cóng)功能(néng)上(shàng)看(kàn)，備份更多是作(zuò)爲CDM其中的一項數據獲取手段。CDM副本數據管理(lǐ)基于數據虛拟化等核心技術，自(zì)動化實現(xiàn)了(le)從(cóng)數據獲取到(dào)數據使用(yòng)再到(dào)數據歸檔，數據銷毀的全生命周期管理(lǐ)。其中，在數據獲取環節既可以通過用(yòng)戶既有備份系統内獲取數據，也(yě)可以通過從(cóng)生産環境實時(shí)獲取數據，又或者用(yòng)戶以腳本的方式自(zì)助上(shàng)傳數據等多種方式。相比備份，CDM更加關心的是數據的交付使用(yòng)與管理(lǐ)。

過去的十多年時(shí)間，CDM的主要玩(wán)家分布在北美(měi)。在國内，從(cóng)上(shàng)訊信息2016年發布了(le)國内第一款真正意義上(shàng)的CDM産品開(kāi)始，近兩年CDM技術在金(jīn)融和(hé)運營商這(zhè)兩個行業的蓬勃發展，推動了(le)開(kāi)發測試場景的數據架構轉型，并且大(dà)有替代傳統備份之勢。

1、Actifio

Actifio成立于2009年。2020年，谷歌宣布收購Actifio，收購完成後，Actifio會(huì)并入Google Cloud。

Actifio的多雲複制數據管理(lǐ)（Copy Data Management）軟件平台虛拟化拷貝數據，允許以原生格式對(duì)數據的虛拟副本進行完整的生命周期管理(lǐ)。通過一套豐富的API，Actifio的軟件可以無縫地集成到(dào)任何IT服務管理(lǐ)工(gōng)具、DevOps工(gōng)具鏈或定制的腳本和(hé)應用(yòng)程序中。

Actifio數據虛拟化IT架構及實現(xiàn)原理(lǐ)

2、Cohesity

Cohesity成立于2013年，公司CEO兼聯合創始人Mohit Aron，之前還聯合創立過Nutanix，目前該公司最新的市場估值達到(dào)37億美(měi)元。

對(duì)于Cohesity公司來(lái)說，在線備份隻是其完整數據管理(lǐ)平台的一部分，該平台專注于解決大(dà)規模數據碎片所造成的問題。它側重于幫助企業保護和(hé)管理(lǐ)位于許多不同位置的二級數據。

3、Rubrik

Rubrik也(yě)是由前Nutanix的人員發起創立，提供跨越本地、雲端和(hé)混合雲環境中的企業數據管理(lǐ)和(hé)備份服務。

全球有2500多家企業和(hé)政府使用(yòng)Rubrik公司的Cloud Data Management解決方案來(lái)管理(lǐ)和(hé)協調跨數據中心和(hé)雲的數據。其提供一個單一的數據平台，可以跨數據中心和(hé)雲安全地提供備份，恢複，分析和(hé)合規性。承諾快(kuài)速恢複，提供接近0的RTO。另外(wài)還提供SLA自(zì)動化和(hé)API優先的架構。

4、Delphix

Delphix成立于2008年。Delphix提供了(le)一個API優先的數據平台，該平台跨越多雲并支持從(cóng)雲原生主機到(dào)舊式大(dà)型機的所有應用(yòng)程序。Delphix可自(zì)動執行一系列關鍵的複雜(zá)數據操作(zuò)，包括遵守GDPR和(hé)CCPA等隐私法規。

Delphix聲稱借助其平台，可将數據占用(yòng)空(kōng)間減少10倍，将資源調配速度提高(gāo)100倍。借助Delphix虛拟化，用(yòng)戶可在幾分鐘(zhōng)内大(dà)規模配置輕量級虛拟數據庫副本，大(dà)規模地将數據從(cóng)生産環境複制到(dào)非生産環境，以及使用(yòng)刷新，回滾和(hé)快(kuài)照功能(néng)管理(lǐ)虛拟數據庫等操作(zuò)。

5、Catalogic

Catalogic 2013年成立，總部位于美(měi)國新澤西州。ECX是該公司提供的CDM軟件産品，大(dà)大(dà)簡化了(le)副本數據管理(lǐ)，實現(xiàn)了(le)數據副本的自(zì)動化和(hé)編排，可以在整個企業和(hé)雲中利用(yòng)該副本進行各種創造價值的用(yòng)例。借助Catalogic ECX，将開(kāi)發/測試基礎架構管理(lǐ)時(shí)間減少了(le)多達99％。

ECX還可以幫助用(yòng)戶将數據移動到(dào)雲中，利用(yòng)雲中成本更低(dī)，更具彈性的計(jì)算(suàn)基礎架構，借助ECX，在某些(xiē)用(yòng)例中利用(yòng)雲時(shí)，用(yòng)戶的投資回報(bào)率超過300％。

6、上(shàng)訊信息

上(shàng)訊信息2010年成立，2016年率先發布了(le)國内首款CDM産品—敏捷數據管理(lǐ)平台（ADM），這(zhè)是一款集數據驗證恢複、數據虛拟化、數據脫敏和(hé)數據庫審計(jì)爲一體的數據全生命周期管理(lǐ)産品。通過一個平台，解決數據獲取，數據存儲，數據構建，數據使用(yòng)，數據歸檔，數據銷毀的所有數據問題。

數據使用(yòng)的全生命周期管理(lǐ)，資料來(lái)源：上(shàng)訊信息

ADM核心技術-數據虛拟化技術，可以通過一份數據的“黃金(jīn)副本”快(kuài)速創建出多份數據副本交付使用(yòng)，所交付的數據都是可讀可寫的，并且可以達到(dào)分鐘(zhōng)級的數據交付效率，以及實現(xiàn)10倍以上(shàng)的存儲成本節省。目前，ADM獲得了(le)金(jīn)融和(hé)運營商行業多家頭部客戶的使用(yòng)和(hé)持續複購。

對(duì)每一家緻力于數據驅動的企業和(hé)組織而言，CDM技術無疑重塑了(le)其過去臃腫的數據架構和(hé)繁冗的數據管理(lǐ)流程，以敏捷的數據架構就緒企業數字化轉型，加速業務交付，提高(gāo)企業的決策效率以及生産力水(shuǐ)平。

但(dàn)這(zhè)并不是CDM的全部，這(zhè)項令人着迷不已的技術未來(lái)又将擁有怎樣的蛻變？做一些(xiē)預測：

第一，跨越本地數據中心，邊緣和(hé)多公有雲的數據流動和(hé)存儲。CDM需要滿足混合多雲時(shí)代用(yòng)戶對(duì)數據在不同端的流動和(hé)統一管理(lǐ)的需求，支持不同位置的基礎環境，例如可利用(yòng)公有雲更加經濟、彈性的存儲資源，進一步降低(dī)OPEX。而無論是部署于邊緣，本地還是多公有雲，都需要滿足一緻性和(hé)可用(yòng)性服務體驗。

第二，以數據爲中心，打通數據上(shàng)中下(xià)遊鏈條，實現(xiàn)數據的全生命周期管理(lǐ)。從(cóng)産品的角度，可以基于靈活的license授權，爲用(yòng)戶按需交付備份容災，備份校驗，數據虛拟化，數據脫敏，合規審計(jì)等不同功能(néng)，而從(cóng)後台邏輯來(lái)看(kàn)，支持一個統一的數據平台，能(néng)夠無縫連通數據的全生命周期統一管理(lǐ)。

第三，CDM技術與垂直應用(yòng)場景的緊耦合，強關聯。例如，開(kāi)發測試場景下(xià)，能(néng)否基于一套數據平台，跑通所有的開(kāi)發測試作(zuò)業，而無需額外(wài)使用(yòng)第三方平台，例如測試版本控制，以降低(dī)額外(wài)的資源消費，提高(gāo)開(kāi)發測試效率。

相信随着技術的不斷完善以及生态的成熟，CDM，未來(lái)可期！