□方 成

AVID非編網(wǎng)硬件故障風險分析

□方 成

本文以廣西電視臺的AVID非編網(wǎng)維護團隊在日常維護和工作中遇到的情況為例，從設(shè)備安全風險的角度出發(fā)，介紹AVID網(wǎng)絡架構(gòu)、核心存儲、服務集群以及客戶端的安全風險防控分析以及相關(guān)解決方案。

AVID非編網(wǎng)；風險分析；事故分級；應急預案

一、項目介紹

廣西電視臺AVID非編網(wǎng)的建網(wǎng)時間為2008年，該網(wǎng)主要為除新聞及資訊頻道外的全臺所有高、標清頻道日常播出的節(jié)目提供一個穩(wěn)定、可靠、高效的制作平臺。

AVID非編網(wǎng)的組成由以下幾大塊構(gòu)成：核心存儲、管理服務器集群、精編工作站、配音工作站、演播室信號收錄服務器、技監(jiān)級審片室、文件類視頻素材上載工作站、外來文件導入服務器。同時，主網(wǎng)還連接著音頻制作網(wǎng)，以及多個小型非編子網(wǎng)。

二、網(wǎng)絡設(shè)備故障類風險防控

為了便于管理，首先對突發(fā)事故做一套分級處理制度。當故障發(fā)生，處理的時間會影響當天播出節(jié)目的，定義為一級重大故障，啟動相應的重大應急預案。當故障處理時間大于1個小時小于3個小時，但不影響當天節(jié)目下載的，定義為一級故障，啟動相應的一級應急預案。當故障處理時間小于1個小時并且不影響當天節(jié)目下載的，定義為二級故障，啟動相應的二級應急預案。當故障處理時間小于半個小時并且不影響當天節(jié)目下載的，定義為三級故障，啟動相應的三級應急預案。

（一）風險一：核心存儲ISIS 2000故障風險及應急預案

1.刀片故障風險

風險發(fā)生幾率：低；故障分級：重大故障；故障處理時間：30分鐘-5小時。

整套存儲中，當損壞任意一塊刀片，系統(tǒng)會自動將故障刀片剔除，剩余刀片自動重新整合，整合完成后，將恢復容災能力。事后，只需要更換冷備刀片即可。如果同一時間損壞兩塊刀片或以上，將會導致存儲內(nèi)的數(shù)據(jù)丟失。這類風險通常只會發(fā)生在盤箱斷電后的重啟過程中。應急預案：如果是重啟盤箱導致的刀片無法加載，嘗試重新盤箱加電，如確認刀片發(fā)生故障，在網(wǎng)絡平臺系統(tǒng)完全啟動后，將故障刀片手動剔除，并更換冷備刀片，盤箱會自動進行修復。在修復的時段內(nèi)，盤箱性能會有所下降。

首先是為客戶端提供家庭服務，后面越來越清晰，叫“讓家更美好”，58到家只做到家里提供的服務，這就是叫“到家”的根本原因。雖然后來美團等一些公司也叫“到家”，但是他們更多是把外賣“送”到家里，而58到家是服務人員去家里服務。

2.交換背板故障風險

風險發(fā)生幾率：低；故障分級：三級故障；故障處理時間：半小時內(nèi)。

位于每個盤箱后部的交換背板，是網(wǎng)內(nèi)所有設(shè)備連接存儲的接口，一旦發(fā)生故障，將會導致連接在此端口上的相應設(shè)備無法訪問網(wǎng)絡。應急預案：首先確定故障交換背板的位置，將故障端口上的設(shè)備網(wǎng)線移至其他盤箱同網(wǎng)段的交換背板即可恢復設(shè)備的連接。然后在設(shè)備維護時間內(nèi)，更換冷背交換背板。

3.盤箱電源故障風險：

風險發(fā)生幾率：低；故障分級：重大故障。

存儲的每個盤箱均配置使用三組獨立電源供電，失去其中任意一路電源，都不會影響盤箱正常工作，但是一旦發(fā)生兩路電源故障就容易導致盤箱意外斷電，有可能會損壞刀片。同時，盤箱的刀片電源指示燈會閃爍報警，提醒注意。應急預案：更換電源備件，同時檢查數(shù)據(jù)是否丟失，必要時通知節(jié)目部門，啟動欄目內(nèi)部的應急備播機制。

（二）風險二：中心機房核心服務器集群故障風險及應急預案

風險發(fā)生幾率：中；故障分級：三級故障；故障處理時間：網(wǎng)絡系統(tǒng)重啟大約耗時半小時。

網(wǎng)內(nèi)所有核心管理服務器都是采用主備同時在線的方式，主備服務器之間通過心跳線相互檢測，自動切換。每臺服務器都是通過雙網(wǎng)線接入不同盤箱的不同網(wǎng)段的交換背板來連接存儲。常見故障多為服務器當機、硬件故障。應急預案：因為是主備同時在線，所以當某臺服務器發(fā)生故障時，對應的備用服務器會自動接管，不需要人為干預，不會對網(wǎng)絡使用造成影響。這時只需要將故障服務器脫網(wǎng)維修即可，如果維修時間過長，可以使用冷備服務器替換。

（三）風險三：編輯工作站故障風險及應急預案

風險發(fā)生幾率：中；故障分級：三級故障。

全網(wǎng)除高端工作站以光纖方式外，其余普通精編工作站均由千兆網(wǎng)線接入盤箱左右兩塊不同網(wǎng)段的交換背板。編輯工位上還配置有監(jiān)視器、錄像機、視頻加速器等設(shè)備。通常遇到的都是設(shè)備長時間工作導致的無響應，一般重啟相應設(shè)備就可以解決。如果遇到硬件故障需要維修的，可以讓欄目編輯更換到相同設(shè)備配置的工位上繼續(xù)工作即可。應對措施：加強巡視，出現(xiàn)故障立刻排查原因，讓編輯更換工位繼續(xù)工作，然后著手清除故障。

（四）風險四：交換機故障風險及應急預案

風險發(fā)生幾率：低；故障分級：一級故障；故障處理時間：大約一個半小時。

常見故障及應急預案：如果接入第三方服務器的交換機出現(xiàn)故障，會出現(xiàn)網(wǎng)內(nèi)設(shè)備無法訪問外來文件存儲池、無法使用自動唱詞服務器等現(xiàn)象。當無法訪問外來文件存儲池時，可以由網(wǎng)管人員將外來介質(zhì)通過一臺采用非windows系統(tǒng)的電腦，將需要導入的文件轉(zhuǎn)存至一個專用的、空白的移動硬盤，經(jīng)過殺毒后，直接接入工作站背板u口，然后在軟件中直接導入。此預案必須由網(wǎng)管人員全程操作，絕對禁止欄目編輯自行操作。當無法使用自動唱詞功能時，則使用非編軟件自帶的字幕編輯功能，手動拍唱詞。而如果是連接音頻網(wǎng)的交換機出現(xiàn)故障，配音工作站以及演播室收錄服務器還有整個音頻制作網(wǎng)就會無法聯(lián)網(wǎng)使用，但仍可以脫網(wǎng)獨立工作。待故障排除后，再連接入網(wǎng)內(nèi)，手動將數(shù)據(jù)遷移至核心存儲即可。

當線上交換機發(fā)生硬件故障時，應當立刻使用冷備交換機，導入備份的交換機配置文件，然后接入網(wǎng)內(nèi)，并重啟服務端設(shè)備就可恢復網(wǎng)絡正常。

（五）風險五：設(shè)備間線路故障風險及應急預案

風險發(fā)生幾率：低；故障分級：三級故障。

所有服務器與核心存儲的連接都是采用雙網(wǎng)線不同網(wǎng)段的連接，這樣就可以相互作主備連接，降低因線路引起故障的風險，并且在工作站到存儲、交換機到存儲之間，均備有足夠數(shù)量的冗余網(wǎng)線或光纖，以供不時之需。

（六）風險六：網(wǎng)絡病毒防護

風險發(fā)生幾率：低；故障分級：嚴重。

由于AVID網(wǎng)絡的先天數(shù)據(jù)結(jié)構(gòu)優(yōu)勢，使其自身擁有較強的抗病毒能力，即使在網(wǎng)絡染毒的情況下，大多數(shù)情況都可帶毒應急工作，能保證最基本的編輯和上下載功能。應對病毒感染，可以將網(wǎng)內(nèi)部分日播欄目臨時遷移至其它非編子網(wǎng)，優(yōu)先保障該欄目使用。其它欄目則啟動各自欄目的應急備播機制。同時，網(wǎng)管應盡快恢復系統(tǒng)。應對措施：加強巡視，禁止私自在工作站使用移動存儲介質(zhì)，禁止在服務器上隨意使用U盤。

三、空調(diào)、動力、火災類風險

（一）中心設(shè)備機房空調(diào)故障

風險發(fā)生幾率：低；故障分級：重大故障。

空調(diào)、機抽濕機由于故障停止工作，會導致機房內(nèi)部溫度急劇升高，引發(fā)設(shè)備過熱，甚至可能導致死機甚至火災風險。應對措施：加強巡視，同時機房內(nèi)應裝配智能溫度監(jiān)控系統(tǒng)，當出現(xiàn)機房溫度過高狀況時，系統(tǒng)自動以短信方式發(fā)出報警。

（二）動力故障

風險發(fā)生幾率：低；故障分級：重大故障。

中心機房配備兩路UPS供電外加一路動力電。所有網(wǎng)絡設(shè)備均使用兩路UPS供電，核心存儲盤箱使用兩路UPS加一路動力電。常見故障為動力倒電引起的動力電短暫中斷。應對措施：注意接聽動力部門的倒電提前通知，并在科室內(nèi)傳達，提醒值班人員加強倒電期間的巡視，出現(xiàn)動力故障立刻聯(lián)系動力部門解決。

四、總結(jié)

廣西電視臺AVID非編網(wǎng)自從建網(wǎng)以來，一直堅持自行維護，沒有聘請第三方維護團隊，在多年的工作實踐中，總結(jié)出了一整套針對AVID非編網(wǎng)的網(wǎng)管軟硬件維護實操經(jīng)驗，將網(wǎng)絡故障風險維持在一個低發(fā)生率、高可控性的狀態(tài)，為節(jié)目部門提供了一個穩(wěn)定、可靠的工作平臺。

1.AVID官方產(chǎn)品使用手冊。

（作者單位：廣西電視臺）