作者:admin 日期:2023-08-25 瀏覽: 次
用6000字,來一次數(shù)據(jù)安全與災(zāi)備漫談
編者按:本文為“千字千金!中國首屆災(zāi)備行業(yè)征文大賽”參賽作品,本文作者是一對父女,父親為知名IT廠商客戶服務(wù)總監(jiān),女兒為在校大學(xué)生,從一名乙方技術(shù)的角度,介紹了災(zāi)備演變的歷程,這些內(nèi)容,不僅涵蓋了災(zāi)備技術(shù)的發(fā)展,也有一些相對應(yīng)的解決策略。以下為文章正文。
有些事是令人憧憬的,雨夜讀書便是一例。窗外雨瀟瀟,燈下書香飄。不求浪漫,只為心閑,為日間忙碌后的那份安適與恬淡。可北京的雨越來越珍貴了,常常一連幾個月不見雨水。南方雨水充沛,可以去江南,上海南京都好。
這日,商旅上海,恰逢雨天。有意早起,在陸家嘴一家咖啡館中獨坐,邊喝咖啡,邊讀新聞,享受滬上雨天的閑暇時光。不久,一位學(xué)者氣質(zhì)的男士進門來,目光偶然對視時,竟然是位熟人。我趕忙起身打招呼,口稱周總。自然的世界很大,人們都想去看看。人間的世界太小,時常不期而遇。
周總?cè)缃褡约簞?chuàng)業(yè),之前是一家大型外資銀行數(shù)據(jù)中心的總經(jīng)理,在金融電子信息領(lǐng)域是位具前瞻眼光的實干家,職業(yè)生涯伴隨著國家金融信息電子化的發(fā)展與技術(shù)進步,是數(shù)據(jù)安全、災(zāi)備行業(yè)的先行者。多年間,他甲方、我乙方,一起經(jīng)歷過幾次險情,也建立了彼此信任的工作友誼。正巧我在寫一篇數(shù)據(jù)安全與災(zāi)備方面的稿子,一番寒暄后我們就在咖啡館里聊起這個話題。
我先開場的,拋磚引玉。我說:“十幾年前,國家就有標(biāo)準(zhǔn),對數(shù)據(jù)中心的災(zāi)備技術(shù)做了規(guī)范性指引,記得是《信息系統(tǒng)災(zāi)難恢復(fù)規(guī)范》。規(guī)范明確了四種方式:冷備、暖備、熱備和雙活。四種方式分別對應(yīng)無設(shè)備的臨時搭建、手工切換方式的主備中心、自動切換的主備中心,以及負(fù)載均衡方式下的雙活中心。具體選哪種方式取決于業(yè)務(wù)需要和財務(wù)預(yù)算。”
周總插話道:“國家標(biāo)準(zhǔn)是數(shù)據(jù)安全大廈的基石。要認(rèn)真看,照著做,當(dāng)然也要與時俱進。”
我接著說:“數(shù)據(jù)是組織的血液。災(zāi)備忙什么?數(shù)據(jù)是關(guān)鍵。”
“數(shù)據(jù)安全有兩個含義:一是數(shù)據(jù)本身的安全,二是數(shù)據(jù)防護安全。”周總打斷我,“數(shù)據(jù)本身的安全涉及加密、解密、保密、身份認(rèn)證、數(shù)據(jù)完整性等技術(shù)。數(shù)據(jù)防護安全涉及磁盤陣列RAID、備份和容災(zāi)技術(shù)。”
我喝了口咖啡,接過話茬:“加密、解密、認(rèn)證這些理論還是留給數(shù)學(xué)家和大學(xué)教授吧。災(zāi)備最前沿、最有實際價值的是數(shù)據(jù)中心。數(shù)據(jù)中心更側(cè)重數(shù)據(jù)備份和容災(zāi)實踐。”
周總點頭,望向窗外說:“是的。把成熟技術(shù)用好最有現(xiàn)實意義。”
我問道:“您是這方面的專家,見多識廣。可否梳理?”
周總往椅背上靠了靠,目光依然望著窗外,若有所思地說道:“我把過往的數(shù)據(jù)防護技術(shù)架構(gòu)分成四代。劃代的標(biāo)準(zhǔn)對應(yīng)著數(shù)據(jù)存儲設(shè)備的技術(shù)發(fā)展。”
我說:“那就先從第一代開始談?”
第一代災(zāi)備
周總說道:“第一代災(zāi)備方案沒有專用的存儲設(shè)備,數(shù)據(jù)保存在主機的磁盤里,備份到磁帶中。磁帶是數(shù)據(jù)防護的關(guān)鍵載體。人們開玩笑說‘命懸一帶’。”
【第一代災(zāi)備故事:火災(zāi)中搶救磁帶的年輕人】
周總大學(xué)畢業(yè)后在一家國有銀行的省行工作。一天,機房電路短路,引起火情。人們慌忙外逃,唯獨一位年輕人逆著人流往里跑,沖進機房,抱著一筐磁帶撤出去。事后,這位年輕人因搶救國家財產(chǎn)受到表彰。表彰會上,他說:“一旦機房不幸焚毀,我們可以憑這些磁帶里的數(shù)據(jù)恢復(fù)業(yè)務(wù)系統(tǒng)。”
幾年后,這位年輕人因工作出色職務(wù)晉升,成為那家銀行全國最年輕的信息科技處副處長,并主持處里工作。據(jù)說行里為了讓他主持工作,有意沒調(diào)派正處長。
當(dāng)年的那位年輕人就是現(xiàn)在坐在我面前的周總。這故事我是從別人那里聽來的。周總告訴我:“表彰會后,行領(lǐng)導(dǎo)說數(shù)據(jù)丟不起,更不想小周有閃失,數(shù)據(jù)安全不能以人員不安全為代價,讓我們多買些磁帶,備兩份兒,分放兩棟樓,同時研究新的災(zāi)備方案。”
第二代災(zāi)備
我說:“專用存儲設(shè)備的出現(xiàn)用不著您冒生命危險了。”
“存儲個頭比主機還大,即便想搬也沒人能搬動。”周總一笑,“數(shù)據(jù)防護安全技術(shù)發(fā)展到第二代,專業(yè)存儲設(shè)備不僅把數(shù)據(jù)的保存和訪問從主機中獨立出來,而且內(nèi)部的重要部件都是冗余設(shè)計,可靠性高多了。”
我說:“但不可奢望100%的可用率。您給電視臺準(zhǔn)備公告的那件事兒,我印象深刻。”
【第二代災(zāi)備故事:給電視臺的新聞稿都準(zhǔn)備好了】
最初認(rèn)識周總時,我們兩家公司關(guān)系屬于客戶-廠家性質(zhì)。我在一家IT廠商供職,他當(dāng)時擔(dān)任一家國有銀行某省分行的信息科技部總經(jīng)理。他們總行已經(jīng)完成了業(yè)務(wù)數(shù)據(jù)上收,建立了全國集中的數(shù)據(jù)中心,省分行的前置機支撐省域內(nèi)營業(yè)網(wǎng)點、ATM機和POS機等業(yè)務(wù)。
一個周日的下午,前置機中的存儲設(shè)備發(fā)生了宕機,好在當(dāng)時營業(yè)網(wǎng)點的業(yè)務(wù)服務(wù)時段臨近結(jié)束,對網(wǎng)點的影響程度相對小一些,但該行全省范圍內(nèi)的ATM機、POS機都不能使用了。情況緊急,人員備件同往。我們到達現(xiàn)場時,周總已經(jīng)等在樓門口,神態(tài)鎮(zhèn)定,表情凝重,像是盼等援軍的將軍。鎮(zhèn)定是為軍心穩(wěn)定,凝重只因戰(zhàn)事緊急。
故障很快查明了,存儲設(shè)備中冗余設(shè)計的一對板卡先后失效,中間間隔幾個小時,第二塊板卡失效后設(shè)備宕機,數(shù)據(jù)訪問中斷。更換部件后,設(shè)備硬件很快恢復(fù)了,接著是文件系統(tǒng)、數(shù)據(jù)庫管理系統(tǒng)完成一致性校驗和修復(fù),最后業(yè)務(wù)系統(tǒng)恢復(fù)了。至此未完。由于異常宕機,多個RAID盤組需要重建(“rebuild”)。重建由人為發(fā)起,由存儲后端自動完成,優(yōu)先級低于前端I/O訪問,耗時長。在RAID盤組重建過程中,人們心里不踏實,擔(dān)心重建異常突然影響業(yè)務(wù)系統(tǒng)。除非重建成功完成,否則緊急狀態(tài)不敢取消。感覺時間過得太快,網(wǎng)點開門營業(yè)的時間正在臨近,重建還在進行……
按照規(guī)定,營業(yè)網(wǎng)點不能正常提供服務(wù)時,銀行需要提前向社會公告,避免因不安情緒引發(fā)擠兌或者其它混亂。客戶和廠商雙方人員一直呆在監(jiān)控室里,我沒留意周總何時離開的,他回來時手上拿著一頁紙。那是準(zhǔn)備發(fā)給電臺、電視臺的公告。他要在預(yù)設(shè)的最后時點發(fā)出。黑色的文字,紅色的公章,紙張很輕,心情很重。
在大地迎來黎明的曙光時,我們也迎來了盤組重建完成、一切恢復(fù)正常的幸福時刻。公告沒有發(fā)出,網(wǎng)點已經(jīng)營業(yè)。我走出大廈,迎著明亮的陽光,沒有興奮地如釋重負(fù)。望著院外車水馬龍的街道,我不由自主地舉臂伸腰,消解疲勞。加之稍后開始的根因分析,我連續(xù)二十多個小時無眠無食。廠家猶如此,客戶何以堪?
雖說往事如煙,但至今更加認(rèn)為:有備無患,方為上策。我在紙上寫下兩行字,邊遞邊說:“這是我在省行故障排除后的那天晚上寫下的句子,也是我的向往。”
周總看后點點頭,說:“用在數(shù)據(jù)安全與災(zāi)備上挺合適。令人向往的境界啊!”
第二代災(zāi)備方案的關(guān)鍵是存儲設(shè)備。通過一系列的針對性設(shè)計,比如板卡冗余、RAID冗余盤組、高速緩存CACHE的電池、冗余電源模塊,以及專用的存儲操作系統(tǒng)等,存儲的數(shù)據(jù)可用性是非常高的。在維護達標(biāo)的情況下,有的廠商還承諾數(shù)據(jù)100%可用性。但這一代災(zāi)備方案難以實現(xiàn)完全的業(yè)務(wù)連續(xù)性。上文前置機的故障,既有偶然性,又有必然性。想消除這種必然性,有兩大障礙。一是硬件,有時冗余部件未及維修雙失效或者某些部件不冗余;二是微碼(固件),冗余部件之間的調(diào)度和協(xié)調(diào)機制失靈。面對這兩座大山,單機方案幾乎不可能翻越了,解決的希望寄托在雙機上。
第三代災(zāi)備
此處請允許我先做個科普。在數(shù)據(jù)容災(zāi)領(lǐng)域有兩個重要的指標(biāo):恢復(fù)點目標(biāo)RPO (Recovery Point Objective)和恢復(fù)時間目標(biāo)RTO (Recovery Time Objective). 前者講的是服務(wù)恢復(fù)后,恢復(fù)得來的數(shù)據(jù)所對應(yīng)的時間點。一個業(yè)務(wù)系統(tǒng)往往有很多數(shù)據(jù),可用的數(shù)據(jù)需要具備一致性。也就是說,所有數(shù)據(jù)都必須是某個時刻的“快照”。否則,數(shù)據(jù)就可能因為不一致而不可用。但數(shù)據(jù)的備份和傳輸需要時間,實時數(shù)據(jù)與備份數(shù)據(jù)之間有個時間差。這個時間差就是RPO. 如果備份數(shù)據(jù)是在中斷時刻之前15分鐘的完整備份,RPO就是15分鐘。而RTO講的是企業(yè)可以容許服務(wù)中斷的時間長度。如果災(zāi)難發(fā)生后30分鐘便需要恢復(fù),RTO就等于30分鐘。
聰明的讀者已經(jīng)明白,這兩個指標(biāo)越小越好,最好都為零。確實如此,實際困難在于災(zāi)備預(yù)算多少。預(yù)算不只包括搭建災(zāi)備環(huán)境所需要的一次性投入,還包括確保數(shù)據(jù)同步所需要的網(wǎng)絡(luò)傳輸費用、人員管理、維護費用等。RPO和RTO越小,預(yù)算越大。周總單位當(dāng)時前置機就只有一臺存儲設(shè)備,一旦發(fā)生故障,RTO就失控了,時間長得令人煎熬。
我問周總:“前置機系統(tǒng)故障后,聽說啟動了緊急采購。”
“是的。我之前打報告申請存儲雙機,預(yù)算一直沒批。那件事之后,很快就批下來了。當(dāng)時預(yù)算緊張,砍掉了其它項目。”周總道,“吃一塹,長一智。行里在數(shù)據(jù)安全及防護的認(rèn)識方面上了一個臺階,甚至開會匯報的次序都做了調(diào)整,行領(lǐng)導(dǎo)要優(yōu)先聽數(shù)據(jù)安全方面的內(nèi)容。”
我問:“后來呢?”
周總:“后來上了存儲雙機方案,加強了故障監(jiān)控,之后多年沒再出過險情。”
再后來,我們兩人的工作都有變動。我去了另外一家IT廠商,周總?cè)チ艘患掖笮屯赓Y銀行的數(shù)據(jù)中心,擔(dān)任總經(jīng)理,手下幾百人。這家銀行的數(shù)據(jù)防護已是第三代存儲技術(shù)。設(shè)備是從我當(dāng)時供職的那家公司采購的,俗稱“存儲雙機”。還建立了同城災(zāi)備中心,一旦生產(chǎn)中心的數(shù)據(jù)不可用,業(yè)務(wù)系統(tǒng)可以切換到同城災(zāi)備中心的設(shè)備上繼續(xù)運行。
第三代災(zāi)備的技術(shù)先進程度,遠非第二代的單機架構(gòu)可比。大型銀行客戶或者業(yè)務(wù)關(guān)鍵的其他行業(yè)客戶不僅建立了兩中心,還建有異地災(zāi)備中心,俗稱“三中心”。同一份數(shù)據(jù)同時有三個備份。萬一發(fā)生諸如地震等重大災(zāi)害,即使同城的兩個中心受損嚴(yán)重,但遠在異地的災(zāi)備中心還有一份數(shù)據(jù)。可謂高枕無憂了。
絕對的安全是沒有的,只是遇險的概率大小。周總的數(shù)據(jù)中心“存儲雙機”方案雖然RPO為零,但RTO會達到一個多小時,因為其中涉及服務(wù)器、網(wǎng)絡(luò)、業(yè)務(wù)系統(tǒng)等一大堆的切換,文件系統(tǒng)需要裝載(“mount”)備份卷。這一個多小時內(nèi),業(yè)務(wù)系統(tǒng)不可用。實際運行中,如果不是遇到火災(zāi)、供電異常或者建筑物損毀一類大的事故,而僅僅因為存儲設(shè)備故障就切換到災(zāi)備中心,這還是很令決策者糾結(jié)的。毋容置疑,決策者主觀上還是希望盡可能在無需災(zāi)備切換的情況下排除險情,這樣對業(yè)務(wù)系統(tǒng)的影響最小。
【第三代災(zāi)備故事:報功與報喜】
事有湊巧,周總的數(shù)據(jù)中心遇到過“存儲雙機”架構(gòu)中一臺存儲設(shè)備持續(xù)告警,一個物理盤柜中幾十塊磁盤都在報錯,好在業(yè)務(wù)系統(tǒng)仍可正常運行。工程師們忙了兩天,險情未排除。
公司派我到現(xiàn)場全權(quán)指揮并協(xié)調(diào)國外研發(fā)中心的專家支持。周總很謹(jǐn)慎,叮囑我任何進展先向他通報,不要越過他報給他們的中國總部。故障發(fā)生第五天時,出現(xiàn)轉(zhuǎn)機,異常的磁盤僅剩兩塊。籠罩人們心頭多日的霧霾開始散去,疲憊的臉上有了笑容,沉悶的耳畔傳來笑聲。未到奔走相告時,已見喜鵲正飛來。
我分別向周總和我公司總部報告了最新進展。不久之后,被周總叫去談話。本以為是談下一步安排,不成想被劈頭蓋臉地指責(zé)了一頓。我一頭霧水,不明就里。原來,周總認(rèn)為故障沒有完全消失,原因沒有查明,向其總部匯報時機不成熟。偏偏他們總部的領(lǐng)導(dǎo)獲知了進展情況,反過來向他核實。總部領(lǐng)導(dǎo)的突然過問,令他被動和惱怒,甚至推測我公司存在越級匯報問題,于是詰問我是否“急于報功”。
我猜測有人并無惡意地傳播了消息。面對盛怒的周總,我不急不緩地說:“先前我已向公司的有關(guān)同事強調(diào)了您的囑咐,不可以越級報告貴行總部。我相信不會有人故意違反,你我分別查查實情。報功的可能性沒有,因為沒有功勞可報。但人們愁悶了多日,不排除有人急于報喜的可能。”也許誤解消除了,也許不快已過去,此話一出,周總便平靜下來,換了話題。后來事情徹底解決了,業(yè)務(wù)系統(tǒng)未曾切換。自此之后,與周總的工作友誼加深了,遇有雙方會議,他都指名邀請我參加。
從此事的經(jīng)過可以知道,業(yè)務(wù)系統(tǒng)可用率非常重要,時刻耿耿在懷。遇有設(shè)備故障,上上下下都很關(guān)注,心情難免緊張,焦慮也屬正常。焦慮緣于系統(tǒng)癱瘓的嚴(yán)重后果。知名企業(yè)的IT系統(tǒng)宕機事件時常見諸報端。2011年,韓國農(nóng)協(xié)銀行系統(tǒng)癱瘓,服務(wù)中斷了三天,數(shù)據(jù)丟失嚴(yán)重。2016年達美航空公司六個小時的宕機造成了一億多美元的成本損失。即使在云技術(shù)時代,依然難以避免。2016年、2019年阿里云的“I/O不響應(yīng)”影響大片地域。IT系統(tǒng)的脆弱性令人心悸,業(yè)務(wù)系統(tǒng)的可用性高度敏感。
正因如此,災(zāi)備切換時常面臨兩難選擇:切換不切換都擔(dān)心。一個多小時的RTO令數(shù)據(jù)中心的切換決策猶豫不決,不到萬不得已,不愿下達切換的指令。癥結(jié)在于RTO仍是災(zāi)備架構(gòu)的軟肋,要克服就要等第四代災(zāi)備問世了。
第四代災(zāi)備
當(dāng)?shù)谒拇鸀?zāi)備技術(shù)問世后,我最先介紹給周總。被稱為“雙活存儲集群”的第四代技術(shù)容忍整臺存儲設(shè)備宕機,業(yè)務(wù)系統(tǒng)不受宕機影響。跨同城兩數(shù)據(jù)中心的存儲集群可以做到存儲設(shè)備級別的“雙活”(active-Active)及負(fù)載均衡,通常也配置主機集群,存儲設(shè)備宕機對業(yè)務(wù)系統(tǒng)是透明的,RTO接近為零。內(nèi)置于存儲設(shè)備之內(nèi)的高性能、高彈性、自動化、一體化的數(shù)據(jù)復(fù)制技術(shù)是當(dāng)今最先進的災(zāi)備技術(shù)架構(gòu)和方案,是數(shù)據(jù)中心關(guān)鍵業(yè)務(wù)系統(tǒng)的福音。
工欲善其事,必先利其器。周總長期在數(shù)據(jù)中心工作,深知先進災(zāi)備技術(shù)對業(yè)務(wù)系統(tǒng)暨銀行生產(chǎn)安全的重要性。在其積極推動下,他們中心成為第四代災(zāi)備技術(shù)的早期客戶之一。災(zāi)備演練完全自動化,系統(tǒng)運行基本沒感知。關(guān)鍵業(yè)務(wù)系統(tǒng)受惠于最可靠的災(zāi)備架構(gòu)和設(shè)施,宕機風(fēng)險遠去了。
災(zāi)備對策
外面的雨依然下著,我們的話題繼續(xù)聊著。周總說:“自從上了第四代災(zāi)備,多年來從未有過的踏實。那種感覺棒極了,局外人很難理解。”
我說:“一切就完滿結(jié)束了?”
周總:“不會。”
我說:“還有什么挑戰(zhàn)?”
“有些想法。不是學(xué)術(shù),純屬聊天。”周總接著說,“可能遇到的一些風(fēng)險和艱難包括國際禁運、自然災(zāi)害、人為破壞、設(shè)備故障、供電故障、網(wǎng)絡(luò)故障以及誤操作。”
我問道:“有什么建議?”
周總略一停頓,說道:“這幾類風(fēng)險成因不同,影響范圍和程度各異,對策也不同……”他說了很多,似乎經(jīng)過了深思熟慮,不吐不快。摘其大要,列為三條。
第一、對于國際禁運這一類風(fēng)險是全局性的,需要政府、行協(xié)和企業(yè)心無僥幸地做準(zhǔn)備。政府和行協(xié)可以建立IT設(shè)備博物館,把淘汰下來的舊設(shè)備保存好,最好是硬件、軟件、應(yīng)用程序、使用手冊等配套保存。定期加電,使之處于隨時可以使用的狀態(tài)。可以參考某些國家保存淘汰的軍事裝備的做法。一些國家把淘汰下來的舊裝備并不丟棄,而是有計劃地保存起來。一旦新裝備消耗完又得不到及時補充時,舊裝備就可投用,雖不先進,但比沒有要好很多很多。
除了政府和行協(xié),企業(yè)層面也要有所作為。制定“利舊”計劃時,預(yù)案要假定長期禁運的可能性。據(jù)此制定保持既有災(zāi)備水平的年限、降級災(zāi)備水平的年限、直至沒有災(zāi)備的年限等。其實,“利舊”不僅適用于國際禁運,也適用于其它突發(fā)事件。據(jù)傳聞,美國“911”事件后,有的公司在全球范圍內(nèi)搜羅某廠家停產(chǎn)多年的小型機,好壞不限。過去這些年份,我國處于經(jīng)濟增長高速期、中速期。一旦進入低速期,業(yè)務(wù)數(shù)據(jù)量增長降速,IT系統(tǒng)提速擴容的需要下降,更新?lián)Q代的資金和預(yù)算就不會如今天這般的充裕,延長設(shè)備使用期限必將會常態(tài)化,我們需要整體謀劃,未雨綢繆。
第二、對于地震、水災(zāi)等自然災(zāi)害,或者恐襲等人為破壞這一類風(fēng)險,異地災(zāi)備中心最有效;對于設(shè)備故障、供電故障、網(wǎng)絡(luò)故障一類的風(fēng)險,要靠同城或異地災(zāi)備中心;對于誤操作,就要靠數(shù)據(jù)中心自動化降低隱患,并依靠同城或異地災(zāi)備中心應(yīng)對。現(xiàn)有的第四代災(zāi)備方案可以較好地應(yīng)對。關(guān)鍵是提前做好預(yù)案,臨事不慌。
第三、數(shù)據(jù)防護、數(shù)據(jù)安全的管理尤其重要,管理得好可以充分發(fā)揮和發(fā)掘既有方案的效能和潛能。管理是技術(shù)的倍增器,數(shù)據(jù)安全的風(fēng)險管理也不例外。管理的對象主要是人員。數(shù)據(jù)中心的管理人員和技術(shù)人員很專業(yè)、很可敬,服務(wù)商的技術(shù)人員遵經(jīng)驗、守規(guī)范,但長年累月地、多年如一日地不犯錯幾乎是不可能的。“木桶原理”中的短板隨時可能出現(xiàn),任何一個短板都可能帶來大的麻煩。日常運營中需要避免松懈和疏忽,措施需有效,警鐘要長鳴。
我將這些記錄下來,寫成此文,希望能對讀者有所啟發(fā)和借鑒。經(jīng)過三十多年的發(fā)展,我國數(shù)據(jù)安全與災(zāi)備技術(shù)越來越成熟,風(fēng)險管理越來越規(guī)范。一路走來,有困苦有艱難。回頭再看,更多的是敬意和點贊。微信聊天、網(wǎng)上購物、移動支付這些司空見慣的生活新方式,都是各自的數(shù)據(jù)中心在起關(guān)鍵作用。各行各業(yè)的數(shù)據(jù)中心為國家的現(xiàn)代化、為經(jīng)濟發(fā)展、為民生的便利做出了巨大的貢獻。假如沒有這些數(shù)據(jù)中心,我們的工作方式和生活方式無疑將后退多年。不夸張地說,方方面面皆已電子化、信息化的現(xiàn)代社會高度依賴不為眾人知的數(shù)據(jù)中心。數(shù)據(jù)安全沒有一時不關(guān)鍵,數(shù)據(jù)中心的災(zāi)備沒有一刻可或缺。
行文至此,我又想起了多年前在省城的那個夜晚寫下的句子。那是我的向往、周總的向往,也是更多人的向往。錄在此處,作為結(jié)尾。
屋瓦固,任春雨紛紛,淡定憑欄觀雨景;
窗欞堅,料秋風(fēng)陣陣,悠然倚樓聽風(fēng)鈴。
【后記】本文引用的災(zāi)備故事由真人真事改編而來。人物姓氏用了化名,任何的對號入座都是不合適的。作者選取故障場景作為切入點,是為了借此點明技術(shù)架構(gòu)的薄弱所在,那也是技術(shù)方案更新?lián)Q代的關(guān)鍵所在。實際生產(chǎn)中,設(shè)備故障總會有,但不可誤以為“都是故障”。醫(yī)院多見病患,周圍眾皆健康。是同樣道理。
— 推薦閱讀 —千字千金!中國首屆災(zāi)備行業(yè)征文大賽正式啟動2019-02-07征文賞析|雙模IT下,如何描繪銀行災(zāi)備架構(gòu)的未來?2019-04-02關(guān)于數(shù)據(jù)庫災(zāi)備,你想知道的都在這里2019-04-29
關(guān)于英方
上海英方軟件股份有限公司是一家專注于數(shù)據(jù)安全及業(yè)務(wù)連續(xù)性管理領(lǐng)域的科技企業(yè)。秉承“讓世界早有準(zhǔn)備”的企業(yè)使命,以實時數(shù)據(jù)復(fù)制、數(shù)據(jù)庫語言級復(fù)制、云災(zāi)備等技術(shù)為各類用戶在物理、虛擬或云計算平臺的關(guān)鍵數(shù)據(jù)和業(yè)務(wù)提供全面保護及統(tǒng)一管理。
· 咨詢熱線:400-0078-655
· 官網(wǎng):www.info2soft.com