AVID非編網硬件故障風險分析

□方 成

AVID非編網硬件故障風險分析

□方 成

本文以廣西電視臺的AVID非編網維護團隊在日常維護和工作中遇到的情況為例，從設備安全風險的角度出發，介紹AVID網絡架構、核心存儲、服務集群以及客戶端的安全風險防控分析以及相關解決方案。

AVID非編網；風險分析；事故分級；應急預案

一、項目介紹

廣西電視臺AVID非編網的建網時間為2008年，該網主要為除新聞及資訊頻道外的全臺所有高、標清頻道日常播出的節目提供一個穩定、可靠、高效的制作平臺。

AVID非編網的組成由以下幾大塊構成：核心存儲、管理服務器集群、精編工作站、配音工作站、演播室信號收錄服務器、技監級審片室、文件類視頻素材上載工作站、外來文件導入服務器。同時，主網還連接著音頻制作網，以及多個小型非編子網。

二、網絡設備故障類風險防控

為了便于管理，首先對突發事故做一套分級處理制度。當故障發生，處理的時間會影響當天播出節目的，定義為一級重大故障，啟動相應的重大應急預案。當故障處理時間大于1個小時小于3個小時，但不影響當天節目下載的，定義為一級故障，啟動相應的一級應急預案。當故障處理時間小于1個小時并且不影響當天節目下載的，定義為二級故障，啟動相應的二級應急預案。當故障處理時間小于半個小時并且不影響當天節目下載的，定義為三級故障，啟動相應的三級應急預案。

（一）風險一：核心存儲ISIS 2000故障風險及應急預案

1.刀片故障風險

風險發生幾率：低；故障分級：重大故障；故障處理時間：30分鐘-5小時。

整套存儲中，當損壞任意一塊刀片，系統會自動將故障刀片剔除，剩余刀片自動重新整合，整合完成后，將恢復容災能力。事后，只需要更換冷備刀片即可。如果同一時間損壞兩塊刀片或以上，將會導致存儲內的數據丟失。這類風險通常只會發生在盤箱斷電后的重啟過程中。應急預案：如果是重啟盤箱導致的刀片無法加載，嘗試重新盤箱加電，如確認刀片發生故障，在網絡平臺系統完全啟動后，將故障刀片手動剔除，并更換冷備刀片，盤箱會自動進行修復。在修復的時段內，盤箱性能會有所下降。

首先是為客戶端提供家庭服務，后面越來越清晰，叫“讓家更美好”，58到家只做到家里提供的服務，這就是叫“到家”的根本原因。雖然后來美團等一些公司也叫“到家”，但是他們更多是把外賣“送”到家里，而58到家是服務人員去家里服務。

2.交換背板故障風險

風險發生幾率：低；故障分級：三級故障；故障處理時間：半小時內。

位于每個盤箱后部的交換背板，是網內所有設備連接存儲的接口，一旦發生故障，將會導致連接在此端口上的相應設備無法訪問網絡。應急預案：首先確定故障交換背板的位置，將故障端口上的設備網線移至其他盤箱同網段的交換背板即可恢復設備的連接。然后在設備維護時間內，更換冷背交換背板。

3.盤箱電源故障風險：

風險發生幾率：低；故障分級：重大故障。

存儲的每個盤箱均配置使用三組獨立電源供電，失去其中任意一路電源，都不會影響盤箱正常工作，但是一旦發生兩路電源故障就容易導致盤箱意外斷電，有可能會損壞刀片。同時，盤箱的刀片電源指示燈會閃爍報警，提醒注意。應急預案：更換電源備件，同時檢查數據是否丟失，必要時通知節目部門，啟動欄目內部的應急備播機制。

（二）風險二：中心機房核心服務器集群故障風險及應急預案

風險發生幾率：中；故障分級：三級故障；故障處理時間：網絡系統重啟大約耗時半小時。

網內所有核心管理服務器都是采用主備同時在線的方式，主備服務器之間通過心跳線相互檢測，自動切換。每臺服務器都是通過雙網線接入不同盤箱的不同網段的交換背板來連接存儲。常見故障多為服務器當機、硬件故障。應急預案：因為是主備同時在線，所以當某臺服務器發生故障時，對應的備用服務器會自動接管，不需要人為干預，不會對網絡使用造成影響。這時只需要將故障服務器脫網維修即可，如果維修時間過長，可以使用冷備服務器替換。

（三）風險三：編輯工作站故障風險及應急預案

風險發生幾率：中；故障分級：三級故障。

全網除高端工作站以光纖方式外，其余普通精編工作站均由千兆網線接入盤箱左右兩塊不同網段的交換背板。編輯工位上還配置有監視器、錄像機、視頻加速器等設備。通常遇到的都是設備長時間工作導致的無響應，一般重啟相應設備就可以解決。如果遇到硬件故障需要維修的，可以讓欄目編輯更換到相同設備配置的工位上繼續工作即可。應對措施：加強巡視，出現故障立刻排查原因，讓編輯更換工位繼續工作，然后著手清除故障。

（四）風險四：交換機故障風險及應急預案

風險發生幾率：低；故障分級：一級故障；故障處理時間：大約一個半小時。

常見故障及應急預案：如果接入第三方服務器的交換機出現故障，會出現網內設備無法訪問外來文件存儲池、無法使用自動唱詞服務器等現象。當無法訪問外來文件存儲池時，可以由網管人員將外來介質通過一臺采用非windows系統的電腦，將需要導入的文件轉存至一個專用的、空白的移動硬盤，經過殺毒后，直接接入工作站背板u口，然后在軟件中直接導入。此預案必須由網管人員全程操作，絕對禁止欄目編輯自行操作。當無法使用自動唱詞功能時，則使用非編軟件自帶的字幕編輯功能，手動拍唱詞。而如果是連接音頻網的交換機出現故障，配音工作站以及演播室收錄服務器還有整個音頻制作網就會無法聯網使用，但仍可以脫網獨立工作。待故障排除后，再連接入網內，手動將數據遷移至核心存儲即可。

當線上交換機發生硬件故障時，應當立刻使用冷備交換機，導入備份的交換機配置文件，然后接入網內，并重啟服務端設備就可恢復網絡正常。

（五）風險五：設備間線路故障風險及應急預案

風險發生幾率：低；故障分級：三級故障。

所有服務器與核心存儲的連接都是采用雙網線不同網段的連接，這樣就可以相互作主備連接，降低因線路引起故障的風險，并且在工作站到存儲、交換機到存儲之間，均備有足夠數量的冗余網線或光纖，以供不時之需。

（六）風險六：網絡病毒防護

風險發生幾率：低；故障分級：嚴重。

由于AVID網絡的先天數據結構優勢，使其自身擁有較強的抗病毒能力，即使在網絡染毒的情況下，大多數情況都可帶毒應急工作，能保證最基本的編輯和上下載功能。應對病毒感染，可以將網內部分日播欄目臨時遷移至其它非編子網，優先保障該欄目使用。其它欄目則啟動各自欄目的應急備播機制。同時，網管應盡快恢復系統。應對措施：加強巡視，禁止私自在工作站使用移動存儲介質，禁止在服務器上隨意使用U盤。

三、空調、動力、火災類風險

（一）中心設備機房空調故障

風險發生幾率：低；故障分級：重大故障。

空調、機抽濕機由于故障停止工作，會導致機房內部溫度急劇升高，引發設備過熱，甚至可能導致死機甚至火災風險。應對措施：加強巡視，同時機房內應裝配智能溫度監控系統，當出現機房溫度過高狀況時，系統自動以短信方式發出報警。

（二）動力故障

風險發生幾率：低；故障分級：重大故障。

中心機房配備兩路UPS供電外加一路動力電。所有網絡設備均使用兩路UPS供電，核心存儲盤箱使用兩路UPS加一路動力電。常見故障為動力倒電引起的動力電短暫中斷。應對措施：注意接聽動力部門的倒電提前通知，并在科室內傳達，提醒值班人員加強倒電期間的巡視，出現動力故障立刻聯系動力部門解決。

四、總結

廣西電視臺AVID非編網自從建網以來，一直堅持自行維護，沒有聘請第三方維護團隊，在多年的工作實踐中，總結出了一整套針對AVID非編網的網管軟硬件維護實操經驗，將網絡故障風險維持在一個低發生率、高可控性的狀態，為節目部門提供了一個穩定、可靠的工作平臺。

1.AVID官方產品使用手冊。

（作者單位：廣西電視臺）