災(zāi)備系統(tǒng)確保業(yè)務(wù)高連續(xù)性

摘要： 中國移動山東公司(以下簡稱“山東移動”)為保障業(yè)務(wù)連續(xù)性、提高用戶體驗，在2009年完成了三中心的容災(zāi)系統(tǒng)建設(shè)。日前，記者采訪了中國移動山東公司賬務(wù)中心崔可升副主任，在給記者介紹山東移動的三中心災(zāi)備系統(tǒng)的過程中，崔主任給出的這樣一組數(shù)據(jù)給記者留下

　　中國移動山東公司（以下簡稱“山東移動”）為保障業(yè)務(wù)連續(xù)性、提高用戶體驗，在2009年完成了三中心的容災(zāi)系統(tǒng)建設(shè)。日前，記者采訪了中國移動山東公司賬務(wù)中心崔可升副主任，在給記者介紹山東移動的三中心災(zāi)備系統(tǒng)的過程中，崔主任給出的這樣一組數(shù)據(jù)給記者留下了深刻的印象：

　　山東移動目前擁有用戶5000多萬；系統(tǒng)的規(guī)模、邏輯主機(jī)數(shù)量已經(jīng)接近500臺；系統(tǒng)的數(shù)據(jù)量4PB；在每年1-2億的IT投入中，有2/3的投入是用于保證數(shù)據(jù)安全性和業(yè)務(wù)連續(xù)性的。

　　確保“三無產(chǎn)品”萬無一失

　　如此大的用戶規(guī)模和數(shù)據(jù)量，如何保證BOSS系統(tǒng)的業(yè)務(wù)連續(xù)性萬無一失，成為了山東移動面臨的首要挑戰(zhàn)。崔主任說：“山東移動的領(lǐng)導(dǎo)曾經(jīng)將BOSS系統(tǒng)的重要性形象的總結(jié)為‘三無產(chǎn)品’，三無是指：無可替代、無與倫比、無以復(fù)加。一句話，移動公司BOSS系統(tǒng)介于網(wǎng)絡(luò)側(cè)和用戶側(cè)，BOSS系統(tǒng)的計費數(shù)據(jù)來源于網(wǎng)絡(luò)側(cè)，用戶通過BOSS系統(tǒng)進(jìn)行產(chǎn)品訂購等業(yè)務(wù)辦理，并查詢服務(wù)使用情況。，所以它處的環(huán)節(jié)是非常非常重要的。比如你的電話無意中被停機(jī)了，或者充了值遲遲不能打出電話，用戶滿意度會大大降低。”BOSS系統(tǒng)的安全性關(guān)系到山東5000多萬用戶的用戶體驗，也是企業(yè)的重中之重，為了降低風(fēng)險，確保BOSS系統(tǒng)有備無患，萬無一失，山東移動在業(yè)務(wù)連續(xù)性方面的建設(shè)也一直在不斷的進(jìn)步。

　　在2002年到2003年，山東移動實現(xiàn)了全省BOSS系統(tǒng)大集中。隨著系統(tǒng)和數(shù)據(jù)的集中完成，也增加了系統(tǒng)的風(fēng)險，為了保證業(yè)務(wù)的連續(xù)性，山東移動建設(shè)了一些簡單的應(yīng)急系統(tǒng)。應(yīng)急系統(tǒng)的構(gòu)建是在2004年完成的。山東移動在其他的存儲設(shè)備上建立一個空間，做一個BCV（業(yè)務(wù)連續(xù)性卷），把數(shù)據(jù)復(fù)制到另一份，這些數(shù)據(jù)可以提供備份恢復(fù)的功能，這就是簡單的容災(zāi)系統(tǒng)。

　　2005年山東移動的主備級容災(zāi)系統(tǒng)上線了。建設(shè)主備級備份系統(tǒng)的契機(jī)是山東移動建設(shè)了一個新中心。新中心建成后，山東移動把所有的業(yè)務(wù)遷到新的中心里面去；然后把原有的老的系統(tǒng)進(jìn)行了一個改造，做成一個主備級的容災(zāi)系統(tǒng)。但是，主備級容災(zāi)系統(tǒng)也存在著一些問題，首先是對于現(xiàn)有系統(tǒng)在出現(xiàn)容災(zāi)的情況下，到底能不能完成任務(wù)?因為主備中心間的系統(tǒng)設(shè)備容量和能力不同，所以對于容災(zāi)的安全性存在著一定的疑問。另外一方面，在主備級容災(zāi)的過程中，新建的機(jī)房，需要人員值守等等一些成本，一年、兩年，可能幾年計算機(jī)設(shè)備更新比較快，4、5年一個周期設(shè)備就折舊差不多了，這樣大量的設(shè)備不能得到應(yīng)用，對于山東移動來說也是一個很大的浪費。反觀生產(chǎn)中心，可能在有需要業(yè)務(wù)高峰期的時候有限資源分配不夠，另外一個中心卻有資源限制，主備中心間的資源無法平衡，也就帶來了一個矛盾的問題。

　　07年開始，在原來主備級容災(zāi)的基礎(chǔ)上，山東移動實行了雙中心容災(zāi)方式，雙中心容災(zāi)方式解決了備用中心容災(zāi)達(dá)不到充分發(fā)揮的問題。當(dāng)然用雙中心的容災(zāi)方式，對管理來說是更加增加了復(fù)雜度，技術(shù)實現(xiàn)方面也提出了很多很高的要求。

　　目前，山東移動用戶量越來越多，而兩個中心每個中心承載的業(yè)務(wù)也是非常大，考慮降低風(fēng)險的方式，于是山東移動建立了第三個物理中心。原則上每一個中心承載的用戶數(shù)不超過一定數(shù)量（如2000萬戶），這樣的話相當(dāng)于把風(fēng)險分散在多個中心，這是山東移動設(shè)計三中心系統(tǒng)的核心思想。新建中心在空間、電影等配套環(huán)境等比較充足，山東移動現(xiàn)在基本上1對2的關(guān)系——一個中心承擔(dān)了全省1/2的量，另外兩個中心各承擔(dān)1/4的量，這是從生產(chǎn)角度來看。與此同時，三中心還互相之間還承擔(dān)了備份的任務(wù)。目前三個中心的業(yè)務(wù)已經(jīng)完全上線了，運行非常好。這三個中心就任何一個中心出問題，其他兩個中心都能把業(yè)務(wù)接過來，這樣整個服務(wù)質(zhì)量、整個客戶的滿意度大大提升了。

　　高性能與ROI的平衡

　　在移動行業(yè)內(nèi)，有一個衡量信息化成本的有效指標(biāo)，就是根據(jù)發(fā)展一位新的用戶，移動所需的費用的多少。在山東移動，發(fā)展一個新用戶所需的BOSS系統(tǒng)投資費用不到其他省份的二分之一，如何實現(xiàn)如此高的ROI，崔主任為我們介紹了山東移動的高效之道：

　　首先，信賴高端產(chǎn)品。山東移動現(xiàn)在所有的主機(jī)全是高端的IBM Power 595，存儲實際上也是虛擬的，當(dāng)然是從我們規(guī)劃來看。我們存儲目前IBM現(xiàn)在也是占了絕大部分，采用IBM也是最高端的DS8300，這款產(chǎn)品非常不錯，包括我們的BOSS系統(tǒng)、經(jīng)營分析系統(tǒng)，都采用大量的IBM存儲系統(tǒng)。選擇高端的機(jī)器是因為它的安全性提高了，我們就是用IBM最高端的機(jī)器，它的性能很好，安全性很好，這是一個方面。

　　另外，山東把IBM的虛擬技術(shù)發(fā)揮的淋漓盡致，我們?nèi)抠I的都是大的設(shè)備，然后就像切蛋糕一樣，切成一小塊一小塊的，因為這個切都是動態(tài)的切，根據(jù)業(yè)務(wù)發(fā)展情況可以動態(tài)調(diào)整，IBM虛擬技術(shù)發(fā)揮了非常重要的作用。這就是IBM所提倡的動態(tài)架構(gòu)，這也是為什么山東移動在ROI方面比兄弟省份有如此大的優(yōu)勢之所在。實際上，山東移動的依托于IBM虛擬技術(shù)的動態(tài)資源調(diào)整架構(gòu)，是目前概念比較熱的“云計算”落地的典型案例。

　　最后，是選擇合作伙伴，我覺得IBM的技術(shù)給我們提供了很好的平臺，沒有好的技術(shù)，可能很多思想就實現(xiàn)不了。系統(tǒng)架構(gòu)的設(shè)計以及它的控制，包括對開發(fā)管理，以及對架構(gòu)的拆分等等，我覺得這個方面也是需要我們有一些技術(shù)或者需要一些經(jīng)驗來做。這方面有兩方面：一是IBM有很好的技術(shù)給我們提供平臺，另外一方面我們積累了很好的經(jīng)驗，這兩者也是缺一不可的。

　　一切從客戶的角度出發(fā)

　　山東移動的容災(zāi)系統(tǒng)的建設(shè)不是一蹴而就的，而是在技術(shù)不斷的摸索中，不斷的進(jìn)步的。從最初的應(yīng)急系統(tǒng)到目前的三中心動態(tài)備份系統(tǒng)，山東移動在業(yè)務(wù)連續(xù)性方面的建設(shè)歷程也具有廣泛的借鑒意義。

　　崔主任總結(jié)到：“業(yè)務(wù)連續(xù)性是一個系統(tǒng)工程，不單純只是容災(zāi)的項目，怎么樣保證BOSS系統(tǒng)長時間穩(wěn)定運行，涉及方方面面的事情，實際上我們在05年與IBM開展合作的時候，除容災(zāi)方面的建設(shè)咨詢外，IBM還承擔(dān)我們的機(jī)房設(shè)計、機(jī)房裝修工作。我們和IBM合作，我覺得最主要的是看到了IBM在這個行業(yè)內(nèi)的經(jīng)驗，對于我們可以提供一些借鑒意義，少走一些彎路。”

　　對于容災(zāi)系統(tǒng)來說，除了項目的搭建以外，演練也是非常重要的。山東移動對于災(zāi)備演練也是非常的重視，比如首先進(jìn)行一些桌面演練，一次不行兩次演練。保證在流程方面是暢通的，然后進(jìn)行真實的演練，在演練中發(fā)現(xiàn)存在的問題，每一次演練都給山東移動帶來了很多的收獲。目前，山東移動每年都要進(jìn)行災(zāi)備演練。

　　山東移動三中心系統(tǒng)的建設(shè)也離不開公司領(lǐng)導(dǎo)的高瞻遠(yuǎn)矚，崔主任這樣說：“作為公司領(lǐng)導(dǎo)層，始終站在客戶角度來考慮，就是要求提供運行安全使用方便的BOSS系統(tǒng)，提高客戶滿意度。公司領(lǐng)導(dǎo)在投資、人員等方面給予了大力支持。至于你內(nèi)部采用什么樣的容災(zāi)備份、容災(zāi)機(jī)制等等，那是技術(shù)細(xì)節(jié)方面的事情，是我們建設(shè)維護(hù)部門需要也應(yīng)該做好的，當(dāng)然壓力也很大。”一切從客戶體驗出發(fā)，一切為了業(yè)務(wù)連續(xù)性，唯有如此，才是山東移動長遠(yuǎn)發(fā)展之道。

(編輯：)

發(fā)布：2007-03-22 18:17 編輯：泛普軟件 · hujian [打印此頁] [關(guān)閉]

相關(guān)欄目：