中國鐵(tiě)塔基于CDM技術構建多雲數據基礎設施實踐

發布時(shí)間：2021-07-11

<p style="margin-top: 0px; margin-bottom: 0px; padding: 0px; max-width: 100%; box-sizing: border-box; clear: both; min-height: 1em; color: rgb(51, 51, 51); font-family: -apple-system, BlinkMacSystemFont, " helvetica="" neue",="" "pingfang="" sc",="" "hiragino="" sans="" gb",="" "microsoft="" yahei="" ui",="" yahei",="" arial,="" sans-serif;="" font-size:="" 14px;="" letter-spacing:="" 1px;="" text-align:="" justify;="" white-space:="" normal;="" background-color:="" rgb(255,="" 255,="" 255);="" overflow-wrap:="" break-word="" !important;"="">而今，在鐵(tiě)塔“一體兩翼”戰略的驅動下(xià)，“鐵(tiě)憨憨”正在數字化轉型道(dào)路上(shàng)不斷上(shàng)演着“速度與激情”——測試數據準備時(shí)間從(cóng)1個月變成2天，存儲空(kōng)間節省了(le)将近一半…這(zhè)一切是如何做到(dào)的？

走，上(shàng)雲去

雲已經成爲企業轉型和(hé)獲得競争優勢的基礎，市場調研機構Gartner一度指出，2020年企業中沒有用(yòng)到(dào)雲戰略的現(xiàn)象，将與今天“無互聯網”的态勢一樣罕見。以雲爲先，甚至是隻有雲，日益成爲許多企業和(hé)組織的默認選擇。

與其他(tā)大(dà)型企業不同的是，由于不存在IT建設的曆史包袱，鐵(tiě)塔從(cóng)成立的第一天開(kāi)始，便輕裝上(shàng)陣選擇了(le)全面的上(shàng)雲戰略。具體通過租用(yòng)華爲雲，電信天翼雲，聯通沃雲三朵雲，構建了(le)完備的生産環境，準生産環境，開(kāi)發環境和(hé)驗收環境，以滿足鐵(tiě)塔各類應用(yòng)業務系統在雲資源池的部署和(hé)運營，以及支撐新應用(yòng)、新業務的敏捷開(kāi)發和(hé)調試。

其中，華爲雲主要作(zuò)爲支撐“兩翼”類業務，即基于站(zhàn)址資源的社會(huì)化共享業務與面向社會(huì)的專業化備電保障服務（如智慧水(shuǐ)庫，智慧河(hé)道(dào)，低(dī)速電動車電池換電等服務）；聯通沃雲承載“一體”類業務，即面向行業内的塔類與室分業務（爲運營商提供天線挂靠等服務）；電信天翼雲支撐鐵(tiě)塔運營監控等應用(yòng)服務。

截止目前，鐵(tiě)塔在三朵雲上(shàng)管理(lǐ)的應用(yòng)系統達到(dào)130多套，虛機5千多台，整體存儲容量7PB。核心的數據庫主要是Oracle和(hé)MySQL兩種，數據規模超過700TB。

在信息化建設路徑上(shàng)，鐵(tiě)塔采取了(le)“全國一盤棋”的布局，即全權由總部的信息化部門(mén)進行整體統籌和(hé)統一管理(lǐ)，信息化規劃和(hé)應用(yòng)系統建設職能(néng)不再下(xià)沉到(dào)各省區(qū)域，通過集中的方式，實現(xiàn)在雲端更便捷地管理(lǐ)IT資源，支撐鐵(tiě)塔“一體兩翼”的信息化需求。

數據，這(zhè)是個問題

如果說信息化體系是鐵(tiě)塔的“血管”，那麽數據就是“血液”。

鐵(tiě)塔基于三朵公有雲構建了(le)較完備的信息化平台，并且在此之上(shàng)依托于全國統一的運營監控系統，不斷強化大(dà)數據分析功能(néng)，讓各類生産要素及資産運營狀況實現(xiàn)數據化呈現(xiàn)、智能(néng)化管理(lǐ)，支撐生産運營和(hé)管理(lǐ)決策。

在數據資源上(shàng)，從(cóng)核心生産數據，到(dào)爲了(le)滿足開(kāi)發測試，容災，備份，數據分析等次級工(gōng)作(zuò)負載的需求，往往還需要複制多份數據副本。以鐵(tiě)塔爲例，一份生産數據至少需要複制另外(wài)三份數據副本，以滿足準生産環境，開(kāi)發環境和(hé)驗收環境的需求。

正如哲學中認爲任何事(shì)物都是矛盾的統一體，冗餘的數據副本雖然滿足了(le)企業鍛造高(gāo)效生産力的需求，但(dàn)是其在經濟性、效率和(hé)安全性等方面也(yě)遇到(dào)了(le)一些(xiē)問題：

第一，需要投入更多不必要的存儲開(kāi)支，以滿足數據冗餘副本的存儲需求，而且産生了(le)大(dà)量的數據孤島，影響數據的利用(yòng)。

第二，數據準備時(shí)間周期長，以鐵(tiě)塔的測試數據準備爲例，過去完全依靠人工(gōng)處理(lǐ)，需要投入6人、總共耗費1個月時(shí)間來(lái)準備數據。第三，數據安全存在風(fēng)險，生産數據往往包含了(le)用(yòng)戶的敏感信息，如個人身份，聯系方式，個人隐私等數據，這(zhè)些(xiē)數據一旦洩露，将給組織和(hé)用(yòng)戶帶來(lái)負面影響。

ADM，重新定義敏捷

企業數字化轉型是一個不斷探索、不斷叠代的過程，需要保持足夠的敏捷，速度和(hé)靈活性，不斷加速創新。而測試數據的低(dī)效率交付，影響了(le)應用(yòng)開(kāi)發和(hé)測試進度，拖慢了(le)整體應用(yòng)部署上(shàng)線，不利于企業創新。

爲了(le)解決冗餘數據副本的管理(lǐ)問題，提高(gāo)測試數據的交付速度，鐵(tiě)塔考慮引入CDM數據副本管理(lǐ)解決方案；經過POC測試，從(cóng)性能(néng)、功能(néng)以及和(hé)鐵(tiě)塔自(zì)身環境的匹配等方面綜合考量，最終選擇了(le)上(shàng)訊信息的ADM敏捷數據管理(lǐ)平台方案。

ADM爲鐵(tiě)塔構建多雲數據基礎設施

具體來(lái)說，ADM目前在鐵(tiě)塔分爲兩個應用(yòng)場景：

第一個，測試數據的極速交付。在鐵(tiě)塔的華爲雲環境中，部署1個ADM管控節點和(hé)6個ADM存儲個節點，采用(yòng)“全量+增量+歸檔日志”的數據備份策略，從(cóng)鐵(tiě)塔的聯通沃雲和(hé)電信天翼雲環境實時(shí)獲取數據，幾分鐘(zhōng)内即可快(kuài)速創建虛拟庫，交付給準生産環境使用(yòng)。

同時(shí)，利用(yòng)ADM的高(gāo)效壓縮引擎，從(cóng)生産環境獲取的數據在ADM存儲集群降低(dī)了(le)約一半的存儲空(kōng)間，并且交付給準生産環境使用(yòng)的虛拟庫幾乎不占用(yòng)任何存儲空(kōng)間，大(dà)大(dà)節省了(le)存儲成本。

第二個，備份數據的自(zì)動化恢複校驗。在鐵(tiě)塔的聯通沃雲環境中部署ADM，對(duì)接NBU備份系統，實現(xiàn)NBU備份數據的自(zì)動化恢複校驗。通過減少備份窗口，在盡量不影響備份作(zuò)業的同時(shí)，自(zì)動化完成備份數據的有效性驗證，保證備份數據的高(gāo)可用(yòng)。

此外(wài)，爲了(le)實現(xiàn)數據的安全使用(yòng)和(hé)集中管控，利用(yòng)ADM完成生産數據的脫敏作(zuò)業也(yě)正在計(jì)劃中。

如今，鐵(tiě)塔的測試數據交付以自(zì)動化、智能(néng)化的方式替代了(le)落後的人工(gōng)拷貝數據方式，從(cóng)原來(lái)的6個人、1個月時(shí)間投入變成現(xiàn)在僅僅隻需要2天時(shí)間，測試數據交付效率提高(gāo)了(le)15倍，并且存儲空(kōng)間占用(yòng)降低(dī)了(le)約一半。

随着測試數據的極速交付成爲現(xiàn)實，測試環境越來(lái)越接近真實的生産環境，不但(dàn)提高(gāo)了(le)鐵(tiě)塔的業務開(kāi)發和(hé)測試效率，還讓IT部門(mén)有更多的時(shí)間和(hé)精力用(yòng)在創新方面，加速IT部門(mén)由原來(lái)單純的支撐部門(mén)真正變成企業業務發展的核心部門(mén)。