2008年上半年，北方聯(lián)合電力公司采用遠程異步鏡像（MirrorView）和連續(xù)數(shù)據(jù)保護（CDP）等先進技術(shù)，建設(shè)了數(shù)據(jù)中心本地/異地容災系統(tǒng)。奧運前夕，我們對該系統(tǒng)進行了測試和演練，測試鏈路故障、主機故障、陣列故障、應(yīng)用系統(tǒng)誤操作誤刪除故障、SAN系統(tǒng)網(wǎng)絡(luò)及單機設(shè)備故障，還進行了生產(chǎn)系統(tǒng)的災難模擬，并順利將ERP應(yīng)用系統(tǒng)切換到容災中心。所有測試都成功完成，恢復點目標（RPO）和恢復時間目標（RTO）值達到預先設(shè)計的要求。同時上述各種數(shù)據(jù)保護和切換措施，對最終用戶完全透明，用戶端不需更改任何設(shè)置，即可訪問恢復后的應(yīng)用系統(tǒng)。

　　雖然目前還沒有出現(xiàn)過真正的故障，但演練和測試讓我們有備無患。實踐表明，這一方案能夠?qū)崿F(xiàn)苛刻條件下應(yīng)用和數(shù)據(jù)的恢復。在此，我介紹一下北方聯(lián)合電力公司數(shù)據(jù)中心本地/異地容災系統(tǒng)建設(shè)的經(jīng)驗和體會，供業(yè)內(nèi)外同行參考。

　　系統(tǒng)概況

　　北方聯(lián)合電力公司數(shù)據(jù)中心本地/異地容災系統(tǒng)主要包括本地機房的近線復制和遠程機房的異步復制兩個部分。系統(tǒng)架構(gòu)如圖所示。

　　容災中心和總部各采用2臺HP主機和2臺CISCO 9000系列智能交換機，互為備份，組成高性能、全冗余的存儲區(qū)域網(wǎng)（SAN）。容災中心與總部之間直接通過Cisco MDS 9000連接，采用FCoIP協(xié)議，鏈路帶寬為622Mbps。

　　在總部機房，采用一臺EMC CLARiiON CX3-80作為數(shù)據(jù)存儲主陣列，以HP EVA6000作為近線復制存儲。采用連續(xù)數(shù)據(jù)保護（CDP）技術(shù)，以2臺EMC Recover Point 應(yīng)用裝置組成群集，負責把HP主機到CX3-80的寫數(shù)據(jù)重定向到EVA6000上。

　　在200公里以外的達拉特電廠，我們建設(shè)了容災中心，主要設(shè)備包括1臺EMC CLARiiON CX3-20和2臺HP主機，為總部機房提供遠程的應(yīng)用級容災保護。核心技術(shù)采用EMC公司的遠程異步鏡像（MirrorView），結(jié)合CISCO9016光纖交換機的特性，可以由CX3-80直接把生產(chǎn)數(shù)據(jù)同步到CX3-20上，不增加主機負擔。

　　建設(shè)背景

　　北方電力成立后在生產(chǎn)、基建、經(jīng)營等各方面取得了輝煌的成就，但在市場競爭中面臨著具大的考驗。隨著其它發(fā)電公司新機組的相繼投產(chǎn)，北方電力發(fā)電總裝機容量在蒙西電網(wǎng)的比例逐年縮小；平均單機容量小，老舊設(shè)備多；發(fā)電負荷率較前兩年大幅降低，發(fā)電量難以保證；再加上員工總額大、負擔多等眾多因素，使公司在企業(yè)核心競爭力方面與其它發(fā)電公司存在較大差距。因此，公司決定采用國際先進的信息技術(shù)和手段，利用先進的管理思想和理念內(nèi)部挖潛，向管理要效益，提高公司的管控能力，走出一條能夠使北方公司做強做大的健康發(fā)展之路。

　　四年來，我們按照“統(tǒng)一領(lǐng)導、統(tǒng)一規(guī)劃、統(tǒng)一標準、統(tǒng)一管理、統(tǒng)一實施”的五統(tǒng)一原則，遵循集團化大集中的管理思想，對公司各個二級單位的信息進行標準化的梳理，逐步建成了覆蓋公司本部至25個二級單位的信息化基礎(chǔ)平臺和信息化應(yīng)用系統(tǒng)。

　　信息標準化方面，依靠公司自身的技術(shù)力量，完成了13個發(fā)電廠10萬以上共54臺機組（小機組退役）、總裝機容量為1379萬KW的KKS設(shè)備編碼工作，形成了公司統(tǒng)一的設(shè)備編碼體系；完成了公司統(tǒng)一的物資編碼，建立了公司統(tǒng)一的編碼標準，形成了統(tǒng)一的物資編碼體系。制定了《北方電力信息化建設(shè)管理規(guī)范》等十個管理制度和標準規(guī)范，在行業(yè)內(nèi)處于領(lǐng)先水平。

　　IT基礎(chǔ)管理方面，建立了公司本部至所屬發(fā)電廠的622M和155M及本部至各所屬單位2M的兩張廣域網(wǎng)系統(tǒng)，完成了所屬新建及老廠的統(tǒng)一標準化局域網(wǎng)建設(shè)；建立了SAP開發(fā)、測試、生產(chǎn)運行系統(tǒng)及門戶、檔案、基建MIS等多個管理系統(tǒng)硬件平臺。建立了公司Apsec VPN及SSL VPN加密數(shù)據(jù)通道，實現(xiàn)了公司本部及所屬單位的移動辦公；完成了公司本部至25個二級單位站點的視頻會議系統(tǒng)。

　　管理信息系統(tǒng)方面，從2005年3月達拉特電廠試點開始至2007年3月包頭第三熱電廠驗收，共完成了所有（13個）發(fā)電廠的生產(chǎn)管理系統(tǒng)BFS++、實時數(shù)據(jù)庫PI的實施工作，并全部進行了實用化驗收；從2006年2月本部及達電試點實施開始，目前已經(jīng)完成了本部及所屬8個電廠的信息門戶系統(tǒng)實施工作并進行了實用化驗收，2007的7月9日，該項目由電機工程學會主持評審為國內(nèi)領(lǐng)先水平；采用大集中的方式，在全公司范圍內(nèi)實施了SAP的 ERP項目（財務(wù)及預算、物資管理兩個模塊），并與生產(chǎn)管理系統(tǒng)BFS++實現(xiàn)了接口；公司所有二級單位實施了OA并與本部上下互聯(lián)，實現(xiàn)了整個公司的全電子化公文流轉(zhuǎn)、合同審批流轉(zhuǎn)以及統(tǒng)一域名下的集團電子郵件等功能；在所有新擴建項目基建過程中（10個基建項目）統(tǒng)一實施應(yīng)用了基建MIS系統(tǒng)；在本部及5個發(fā)電廠推廣應(yīng)用了統(tǒng)一的檔案管理信息系統(tǒng)。

　　隨著各個管理信息系統(tǒng)的實施，信息系統(tǒng)已經(jīng)成為公司生產(chǎn)經(jīng)營管理中須臾不能離開的工具，信息系統(tǒng)的容災備份勢在必行。

　　技術(shù)選擇

　　通過對公司之前的信息平臺及相關(guān)技術(shù)進行分析，我們認為，傳統(tǒng)備份陣列+磁帶庫的方式可能存在幾方面的缺點：一是傳統(tǒng)備份恢復時間太長。二是傳統(tǒng)的直連存儲（DAS）方式，讓IT存儲系統(tǒng)隨著企業(yè)的快速成長而變得繁復累贅，因此需要進行系統(tǒng)資源的整合。三是以往用磁帶進行備份，不僅占用大量的人力資源，人工操作也容易造成失誤。此外，使用磁帶備份的數(shù)據(jù)保護中30%會失敗，且難以驗證數(shù)據(jù)的可恢復性。四是陣列發(fā)生故障后短時間無法恢復應(yīng)用系統(tǒng)運行。

　　因此，北方電力決定建立一個近線虛擬存儲系統(tǒng)，應(yīng)用系統(tǒng)可以不同的存儲設(shè)備上透明地切換。近線虛擬存儲系統(tǒng)首期主要是對核心數(shù)據(jù)庫小型機的數(shù)據(jù)進行備份，其次要兼顧OA、門戶、基建等服務(wù)器的近線數(shù)據(jù)存儲和備份。

　　CDP（連續(xù)數(shù)據(jù)保護技術(shù)）是一項新興的技術(shù)，也是目前最熱門的數(shù)據(jù)保護技術(shù)之一。它可以捕捉到一切文件級或數(shù)據(jù)塊級別的數(shù)據(jù)寫改動，可以對備份對象進行更加細化的粒度的恢復，可以恢復到任意時間點。CDP技術(shù)包括兩種：一種是準CDP技術(shù)（Near CDP），它只能恢復部分指定時間點的數(shù)據(jù)，有點類似于存儲系統(tǒng)的邏輯快照。另一種是TrueCDP，我們稱之為真正的CDP，它可以恢復指定時間段內(nèi)的任何一個時間點。我們的目標是，能夠恢復任意時間點的數(shù)據(jù)。

　　此外，我們還考慮到：新的ERP主存儲要具有承擔數(shù)據(jù)中心存儲池的能力；將主存儲設(shè)備內(nèi)的數(shù)據(jù)連續(xù)備份到近端的存儲設(shè)備上；要求該套系統(tǒng)可以兼容其它廠家的存儲產(chǎn)品；當主存儲發(fā)生故障時可以手動切換到近端備份存儲設(shè)備；可保障主存儲發(fā)生故障后數(shù)據(jù)丟失量不大于10分鐘；新系統(tǒng)要支持異構(gòu)存儲環(huán)境，可以支持對windows、HP UNIX、AIX、LNIX等操作系統(tǒng)在存儲設(shè)備上的備份恢復；數(shù)據(jù)遷移要安全可靠，不允許數(shù)據(jù)丟失，等等技術(shù)因素。

　　通過對主流的供應(yīng)商進行綜合考察，我們認為，EMC的解決方案最符合要求。它的CLARiiON CX3存儲系統(tǒng)性能不錯，應(yīng)用很流行；它的RecoverPoint軟件能夠恢復任意時間點的數(shù)據(jù)；它的MirrorView遠程復制軟件可以直接在存儲設(shè)備之間進行，不需要主機，大大減輕主機的負擔；它在兼容性和異構(gòu)支持方面表現(xiàn)都不錯。所以，我們最后選擇了EMC的方案。現(xiàn)在來看，無論是對技術(shù)方向還是供應(yīng)商的選擇，結(jié)果都還不錯。

　　意外效益

　　容災系統(tǒng)實現(xiàn)對信息系統(tǒng)的多重保護，這一點勿容贅述。

　　容災系統(tǒng)給我們帶來了另一個收獲是，由于容災系統(tǒng)和生產(chǎn)系統(tǒng)的數(shù)據(jù)是同步的，我們可以將備份系統(tǒng)用作仿真測試系統(tǒng)。上馬新系統(tǒng)時，可以在測試系統(tǒng)上進行，新舊系統(tǒng)并行一段時間后正式切換。例如，我們可以快速地實現(xiàn)整個ERP系統(tǒng)的仿真系統(tǒng)。因為可以恢復任意時間點的數(shù)據(jù)，所以我們可以在這個系統(tǒng)上做任何的測試，測試完了再把數(shù)據(jù)恢復回來。今年下半年實施新快速轉(zhuǎn)換的時候，我們本來是要投資購買一個陣列去實現(xiàn)這個功能，但是通過把災備系統(tǒng)用起來，讓我們投資成本節(jié)約了200多萬。

　　下一步，我們將把OA、信息門戶等更多的系統(tǒng)整合到主存儲中來，充分發(fā)揮主存儲作為存儲池的作用，簡化管理，并讓更多的系統(tǒng)得到保護；同時將在信息安全、應(yīng)用系統(tǒng)整合及統(tǒng)一身份認證等方面做進一步的工作。