上海安防网-欧美欧美欧美-上海安全防范报警协会

 故事一：教訓，數據丟失引發的“血案”

    慧聰安防網訊 時間：2006年夏；地點：蘇州；起因：某市級監控項目，采用數模結合方式，前端模擬攝像機接入編碼器，將編碼視頻上傳到監控中心通過視頻平臺軟件進行集中管理、控制、存儲。全市采用多級聯網模式，以各行政區為分中心，并統一建設市級監控中心，對全市分中心進行管理。各分中心分別7*24小時進行視頻錄像，統一采用IPSAN模式。事情就出現在其中的一個分中心：高新區分中心。

    某日，高清區分中心內，系統集成公司駐場人員在一次例行檢查中發現，某個時間段以內的錄像完全無法查找到，并且服務器上掛載的iSCSI卷也消失了，該名系統管理人員意識到，情況復雜了，需要馬上聯系上級以及各廠到現場進行支持。

    待人員到齊，并逐一對各設備進行排查后確定，問題出在磁盤陣列上。在這起事故中，整個系統方案，設備選用上，磁盤陣列的安全性和可靠性配置不說是最好的，但也肯定是排在前列的，偏偏問題出在這種設備上，可想而知，當時設備廠商以及系統集成商肩膀上的壓力有多大。

    經過事后查明，iSCSI磁盤陣列上的一組raid5出現一塊硬盤損壞，熱備盤頂替上去恢復后，壞硬盤未能得到及時更換，導致后續有硬盤持續損壞不能得到恢復，最終造成兩塊硬盤的離線，raid5損壞。到這里為止，事實比較清楚，但深層次的原因需要進一步挖掘。

    首先，導致該事故的表面原因是硬盤損壞。但我們知道，硬盤在大容量數據存儲領域，是屬于“易耗品”，硬盤損壞是不可避免的，我們需要做到的是及時更換。如何能“及時”？這就考驗設備的報警機制了。對設備的維護，我們通常都采取主動以及被動兩種方式，主動式相對設備來說，需要有完善的警告機制，將故障、問題、事件等要素事無巨細的上報。而被動式需要人工干預，建立完善的巡檢機制，及時發現各種隱患、故障點，并進行恢復。主動、被動結合才能使系統穩定運行。從這起事故我們可以發現，整個分中心對于設備的維護存在問題的。設備報警機制不完善，導致硬盤損壞未能及時報警從而未能引起管理人員重視；熱備盤未更新，設備不報這種隱患事件給管理員，導致熱備盤真空期，從而導致整個事件最終走向raid損壞的深淵。

    其次，該中心對設備的選擇存在問題。一般來說，為了保證穩定可靠，集中存儲設備都會選擇專業型產品，采用控制器架構，模塊化設計的產品，保證無單點故障，設備對硬盤以及raid的控制通過專業硬件芯片進行，并且設備可以通過多種方式（如SNMP、Email、Syslog、WindowsMessenger等）進行主動報警上傳，將各種事件以及設備狀態及時呈現在系統里面，給維護工作提供最及時的幫助。反觀該分中心的設備，對于硬盤以及raid的報警機制，只提供了Email一種手段，非常單薄，給系統維護造成一定障礙。

    最后，該中心設備是一款國內典型的入門級產品，采用PC服務器架構，內部未能實現模塊化無線纜連接模式，系統對于硬盤以及raid的管理存在單點問題，增加了硬盤掉線風險，導致整體穩定性不盡如人意，也是引起本次事故的一大隱患。

    經過本次事故以后，甲方客戶對于錄像的丟失感到非常痛心，對系統集成公司以及設備提供商的信任都跌到了谷底，導致后續的幾期擴容項目不再考慮該品牌產品，且在整個區域內的類似項目中也不推薦該品牌產品。對于設備提供商來說，這是血淋淋的教訓。

 故事二：千里奔襲，還客戶業務于穩定

    時間：2004年秋；地點：沈陽；起因：某日，晚上8點左右，北京某公司，正完成加班準備回家的小楊接到領導的電話通知，某商業銀行沈陽分行數據中心一臺核心存儲設備出現報警，該設備其中一個控制器故障，無法提供服務，該控制器上的業務已經全部切換，還沒有影響到客戶的正常使用，但客戶需要快速響應，為了保證明天上班后業務負荷上來后沒有安全隱患，必須于第二天上班前保證設備恢復到雙控狀態。

    接到電話后小楊犯了難，這么晚了，飛機沒了航班，火車沒了班次，怎么辦？控制器備件公司倒是現成的，但怎么送到呢？最后只能選擇了出租車。小楊9點左右打車從北京出發趕往沈陽，完成了生平唯一一次千里奔襲。

    7個多小時的奔波，小楊在凌晨5點左右到達了沈陽。到了目的地，馬不停蹄的趕往數據機房，機房內早有該銀行技術人員陪同小楊去故障設備處，在對設備進行一番排查判斷后，在取得該行領導同意后，在6點20分左右小楊以及該行陪同技術人員決定對問題設備進行控制器更換。

    時間過去得很快，控制器更換過程也一切順利，沒有讓人失望，該設備在更換新控制器后，恢復了正常，業務測試也沒有出現問題，本次維護取得了意料中的勝利。整個過程表面上雖然波瀾不驚，但懂行的都知道，沒有苛刻的產品品質保證，沒有過硬的故障恢復能力，以上的波瀾不驚可能就會演變為波濤洶涌、驚濤駭浪了。

    現在我們該深層次的分析隱藏在這個故事中的種種暗礁了。首先，映入我們眼簾的第一個暗礁就是故障恢復能力。得益于設備的架構，該行的問題設備采用的是配置雙控制器的存儲設備，因此，在發現控制器故障以后，業務能夠實現無縫切換，并且不影響業務的運行，真正做到了在線故障切換能力。有了這種保障，才能順利的避開故障恢復這個龐大的海底暗礁。

    其次，產品品質問題。不是所有的控制器產品故障恢復能力都能達到企業級應用。上面這則故事里面的設備，如果不是有可靠的硬件架構，配合扎實的后臺軟件，經歷嚴格的測試，是不可能如此出色的完成任務的。如果要用數字量化一個設備的可靠性，業界接受的數字是：99.95%-99.99%，再高的99.999%，就不是幾個設備、一套軟件能完成的工作了。

總結

    就安防監控對于專業存儲產品的應用來看，尚處于入門階段。很多項目追求的是產品價格，對于大容量數據的安全性尚未引起足夠的重視，因此大部分監控項目選用的產品是入門級存儲產品，只能解決基本的數據存儲需求。穩定性不佳，故障恢復能力不強是入門級產品普遍存在的現象。

    近年來，安防視頻監控技術在不斷地尋求突破，不僅是技術本身的升級，更要不斷地尋求引進其他行業的成熟技術。在安防視頻監控行業，我們最近看到了廣電行業HD-SDI技術的引用。再往前，我們把業務擴展到以太網上，實現了集中監控、網絡化應用，等等。這些都證明只要有應用需求，就可以借鑒及消化其他行業先進的技術，完善整體解決方案。

    隨著高清應用越來越成熟，高清監控建設是每個使用者、每個廠商都要考慮的問題。在高清錄像面前，圖像細節已經不是奢望。在圖像清晰度越來越高，參考價值越來越大的前提下，錄像存儲的安全性已經是必須實現與解決的問題，隨意丟失錄像就是一種對投資、對效率、對用戶的不負責。

    目前，存儲設備的安全性、可靠性成為行業普遍關注的問題。因此，我們完全可以把數據專業存儲行業成熟的技術引進，借鑒他們先進的概念，改善安防視頻監控方案中集中存儲存在的問題，甚至于可以結合視頻監控行業數據讀寫的特殊性進行優化，打造出符合行業應用的專業產品。

    基于此，大華股份定位自己為網絡存儲“專業、可靠”倡導者，“高效、穩定”實踐者，率先在行業內掀起專業存儲產品推廣風暴，在“以客戶為中心”的指導下，將監控錄像安全的保存下來。