標清硬盤播出系統的維護及故障判斷處理

杜小東

（作者單位：和田地區廣播電視臺）

標清硬盤播出系統的維護及故障判斷處理

杜小東

（作者單位：和田地區廣播電視臺）

和田電視臺于2013年完成了新硬盤播出系統的改造任務，新系統承擔6套標清播出頻道的播出任務。由播出服務器系統、總控及播出切換系統、上載/控制系統、播出內容管理系統、播出周邊系統等設備組成。主要硬件系統有：播出上載視頻服務器系統、相關播出控制的計算機系統、播出管理計算機系統、視音頻系統、播出切換系統及各類應用服務器等。主要應用軟件有：播控軟件、應急上載軟件、技審平臺軟件、FTPServer軟件、系統監控軟件、播出內容管理軟件等。系統運行三年來，比較安全、平穩。下面根據本臺硬盤播出系統的安全措施分析及維護實踐中遇到的故障處理進行淺析。

硬盤播出系統；和田電視臺；故障判斷

1 數據庫維護

確認數據庫維護計劃是否執行：主要是看備份文件是否定期備份和刪除。數據庫硬盤存儲空間：查看數據庫文件占用硬盤空間大小，一般80%為警戒線，超過80%就必須第一時間清理。如果發現數據文件過大（日志文件），就要做分離操作。掌握數據庫服務器運行時資源占用情況：主要查看CPU和內存的使用情況，如果內存占用率過高，可重啟服務器釋放內存。各播出、上載、字幕及編單等工作站重啟：重新初始化播出工作站狀態，消除系統隱患。刪除7天前的節目單list。刪除1個月前的系統log日志。各播出工作站保存本地配置：一旦網絡或數據庫出現故障，可以本地啟動工作站。檢查播控系統各種日志是否存入日志歸檔數據庫。總控矩陣管理機：由于是Windows系統，要定期對其運行狀態進行檢查，重啟系統。

每6個月全系統重啟或重啟核心應用服務器，使Windows操作系統釋放內存和重新初始化系統狀態，消除系統長期運行產生的冗余，避免這些產生死機或運行變慢。每次維護須做維護日期標志懸掛在指定位置。

2 系統應急故障判斷及處理

故障處理原則：當出現故障時，必須以最短的時間將信號切換到備播系統或者應急播出系統，之后進行故障的排查、處理、匯報。判斷方法：利用各監視器和監聽系統，迅速判斷出故障的大致部位，并采取有效地應急措施，以最快的速度查找出問題所在點，立即處理，盡快恢復播出。報告原則：出現播出故障無論是節目還是技術故障均應急播出、迅速判斷、排查處理后及時報告科、部領導；如果一時無法解決播出故障，在應急播出后及時電話報告科、部領導，以求技術支持。

2.1 系統通道故障的應急處理

故障現象1：當主輸出監視器畫面的主信號均出現異常，且PST、PGM異常，但是備播線路正常，且備路PST和PGM都正常。措施：立即將該頻道控制臺上的應急開關解除鎖定，切換到備路鍵（主切換器PGM切換為EXT），使用備路應急播出。原因：切換臺故障。

故障現象2：主輸出監視器的畫面異常，而備輸出監視器畫面正常。措施：立即使用切換器切換備路信號，或用跳線將信號跳過主視頻分配器輸出。原因：主輸出視頻分配器故障。

故障現象3：主硬盤輸出監視異常（主、備監視器，主備視分監視器，PST、PGM以及應急監視器均出現異常）而備硬盤輸出監視正常。措施：在切換臺切備硬盤播出。原因：主硬盤故障，或其輸出視頻分配器故障。

故障現象4：臺標時鐘發生器發生異常。措施：使用切換臺內鍵上臺標，啟用字幕機作臺標播出。原因：臺標機故障或其輸出兩個視頻分配器故障。

故障現象5：轉播總控外來信號，出現信號不正常時或出現非法內容。措施：切換其他正常的總控外來信號播出并及時向領導匯報。原因：信號源問題或分配器問題或信號源遭受非法攻擊。

故障現象6：各總控外來信號均不正常或出現非法內容。措施：切墊片，并與導播、總控、總值班聯系，酌情處理。原因：信號源問題或總控問題。

故障現象7：轉播開始時或播出中，主、備硬盤輸出信號突然同時靜幀或黑場。措施：切矩陣播出。原因：該頻道上載終端或播控軟件問題。

故障現象8：硬盤播出廣告或素材組過程中切換下一節目時主、備硬盤突然出現靜幀。措施：在播控終端的工具欄操作按鈕下拉菜單中點擊“播放”一般能解決問題（注：如此時用“TAKE”功能鍵時會跳過下一條素材造成漏播）。原因：多半是因為前一條素材長度太短（如小于6秒）造成服務器沒有準備好下一節目引起。

故障現象9：播出中字幕機死機或者切換臺上對應的鍵源按鍵變紅。措施：重啟字幕機。原因：字幕機故障。

故障現象10：播出中發現切換臺所有按鍵失效。措施：立即將該頻道控制臺上的應急開關面板解除鎖定，按下備路鍵（主切換器上的PGM切到EXT），使用備路播出，或使用機房的切換器進行切換；按一下切換面板內的復位開關，若仍不能解決則將該切換臺主機內的復位開關復位一下，或重新導入配置，待切換臺恢復正常后，切回主路播出。原因：該切換臺故障。

故障現象11：主視頻服務器工作不正常。措施：切備視頻服務器進行播出。原因：視頻服務器故障或素材問題導致視頻服務器故障。

故障現象12：素材在制定時間內沒有傳輸到播出。措施：檢查策略服務和同步軟件是否正常，如果緊急，則手動發起傳輸。原因：策略服務或同步軟件問題。

故障現象13：OMNEON視頻服務器或OMNEON存儲硬盤亮紅燈。措施：撥打廠商400電話或聯系廠商工程師。原因：硬盤故障。

故障現象14：所有工作站無法訪問數據庫。措施：手動切備數據庫并重啟主數據庫。原因：數據庫故障。

2.2 同步系統故障

故障現象1：播出中出現時鐘、臺標、字幕漂移或無法上鍵。措施：查詢同步系統圖，分析出同步信號的來源，并對上一級同步卡進行更換原因：上一級同步卡故障，或同步線問題。

故障現象2：切換某一信號源時臺標或字幕無法正常加上。措施：立即下鍵并檢查該路信號源的同步信號連線情況，是外來信號的與總控聯系，檢查幀同步機是否已開。原因：信號未同步，或總控的幀同步機沒開。

故障現象3：切換某一信號源時臺標或字幕顏色不正常，但位置穩定。措施：調整該路信號源的副載波相位和行相位。原因：該信號源副載波相位和行相位不準。

2.3 控制系統故障

故障現象1：主控制機死機或無法控制播出。措施：立即使用備控制機接管播出。原因：主控制機問題或主控軟件問題或者是該機的供電問題。

故障現象2：視頻服務器無法控制。措施：重置此視頻服務器，如果問題依舊則嘗試備機接管。原因：控制接口或軟件或視頻服務器出現故障。

故障現象3：主控電腦中，“切換臺故障”紅色告警。措施：立即把主切換臺的PGM檔切換到EXT檔，使用備切換器。原因：切換臺不受控，控制故障。

故障現象4：某一設備或幾個設備同時不受控時（播控終端出紅色告警）。措施：先倒換到備播控終端試試，不行再切出能控制的墊片播出（錄像機可手動啟動），如主切換臺不受控則使用“2 選1”應急開關倒換到備路播出，手動控制播出，更換控制線或倒換器。原因：控制線或倒換器沒有同步工作。

故障現象5：播控軟件中主硬盤或備硬盤狀態錯誤。措施：在播出程序的設備運行狀態窗口選擇硬盤圖標，點擊“R”進行“重置服務器”。原因：視頻服務器狀態檢測故障。

2.4 播控工作站故障

故障現象1：主播控工作站對其下游設備，包括視頻服務器、VTR、切換臺及切換器等其中的某些或全部的控制失效；或者主播控工作站死機。措施：如果備播控工作站沒有進行對播出任務的自動接管，必須采用手動控制的方式在備播控工作站執行接管操作，保證播出正常進行；然后，排查主播控工作站的具體故障原因，包括422倒換器的工作狀態、主播控工作站Moxa卡的工作狀態、主播控工作站控制軟件的工作狀態以及主播控工作站的供電問題等；待設備恢復正常后，再次改由主播控工作站接管。

故障現象2：主、備播控工作站對視頻服務器HDD、VTR、切換臺及切換器等設備的控制同時失效；或者出現主、備播控工作站死機。措施：采用手動操作，控制切換臺、VTR和墊片信號進行應急播出，并按照下面的順序進行故障排查，一是檢查4倒換器是否出現正常，檢查電源是否松動、倒換卡是否損壞、控制線連接是否斷開；二是檢查主、備播控工作站Moxa卡的狀態是否異常。

2.5 數據庫服務器故障

故障現象1：播出主數據庫服務器癱瘓。措施：通過Autostart將數據庫切換至備數據庫服務器，并對各個工作站進行重連數據庫操作，以保證正常播出；同時重啟所有軟件，然后恢復癱瘓的數據庫服務器。

故障現象2：播出主備數據庫服務器同時癱瘓。措施：此時，播控軟件自動從保存在本地的配置文件讀取設備控制信息，可以利用LINE和墊片信號進行應急播出；然后恢復癱瘓的數據庫，并將各工作站重新指向恢復的數據庫。

故障現象3：主數據庫服務器無法啟動；或者操作系統報錯，如磁盤空間已滿、內存不足等。措施：此時備數據庫服務器應該已經自動接管了數據服務業務；在播控工作站上執行“重連數據庫”操作，恢復正常播出；對于其他受影響的工作站可重啟軟件并重連數據庫；恢復主數據庫服務器；最后，手動控制主數據庫服務器上線和備數據庫服務器下線，使數據庫備份機制恢復正常。

2.6 以太網絡故障

故障現象1：播控系統中所有工作站、視頻服務器和數據庫服務器的網絡連接同時出現異常。無法進行素材同步、遷移和回遷等操作。措施：此時播控軟件可以從保存在本地的配置文件讀取設備控制信息，可以利用LINE和墊片信號進行應急播出；然后，檢查以太網交換機，如果交換機出現故障，必須立即維修或更換。待交換機故障排除后，恢復正常播出。

故障現象2：播控系統中的個別工作站無法連接數據庫服務器，無法從播出數據庫讀取素材信息和控制信息。措施：檢查該工作站任務欄中網絡圖標、網線連接和網卡狀態是否正常，如果主播控工作站無法連接播出數據庫，采用手動方式由備播控工作站進行接管，保證正常播出。

故障現象3：以太網交換機端口故障，當鏈接設備的以太交換機端口發生故障時，該故障端口鏈接的工作站將表現為網絡連接斷開，不能正常登錄域，無法使用。措施：應關閉故障端口鏈接的工作站，將該工作站鏈接到以太交換機的正常端口，重新啟動該工作站投入正常使用即可。

故障現象4：當鏈接設備的以太交換機發生故障時，該故障設備鏈接的工作站將表現為網絡連接斷開，不能正常登錄域，無法使用。措施：交換機為3臺H3C交換機，使用堆疊結構。任意一臺出現故障，全網均可能出現故障。此時請聯系公司售后部門，進一步解決問題。

故障現象5：當多臺或所有交換機發生故障時，以及無法給交換機供電時，則為整個網絡發生故障，網絡中的大部分設備無法相互通信。

措施：1）請不要關閉播控工作站上的播控軟件，播控軟件按節目單正常播出；2）修改節目單時，只能添加線路類型信號節目；3）使用矩陣控制工作站中的矩陣控制軟件修改矩陣路由；4）字幕機請使用本地方式進行字幕的制作和播出；5）系統業務穩定后，之后請聯系售后部門，進一步解決問題。

2.7 字幕機工作站故障

故障現象1：正常開啟的字幕機無法接收到播出節目單。措施：檢查字幕機數據庫的消息服務是否開啟

3 節目和素材造成的問題

情況1：播出過程中出現主、備硬盤信號同時靜幀。措施：在播控終端處點開“操作”菜單，按“HDD1同步播放”“HDD2同步播放”，如無效則切墊片。原因：素材在上載時出了問題。

情況2：硬盤播出過程中發現主備硬盤的畫面或伴音均不正常。措施：切墊片或用信號線路播出。原因：該素材在上載過程中出了問題。

情況3：播出過程中發現素材內容與要求不符。措施：切墊片或使用外來信號播出。原因：節目上載錯誤。

4 視頻服務器故障的判斷和處理

視頻服務器的故障有硬盤故障、網絡故障、I/O模塊故障、文件系統故障及電源故障。若服務器前面板狀態指示燈都正常，則表明服務器工作正常，此時不需特殊操作。若發現服務器工作不正常時，可結合狀態指示燈及系統管理軟件來判斷具體故障原因，并針對不同故障執行不同的處理方法。

4.1 硬盤故障

硬盤故障是服務器存在的主要故障，查看RAID狀態指示燈，呈淺藍常亮的話，RAID正常。若狀態指示燈呈黃色閃爍，則說明系統內有故障硬盤。登錄SystemManager軟件，進入DiskUtilities頁面，查看物理硬盤及RaidSet的狀態，故障硬盤的狀態應該是Dead或者Failed，進入故障硬盤屬性頁面，查看硬盤所在位置，點擊RemoveDrives按鈕，等待30秒后，將故障硬盤取出，插入一塊新的硬盤，系統將自動進行RAID重建。要注意收集故障硬盤的信息，如故障時間、故障描述、硬盤序列號、硬盤唯一標識及故障時段的系統日志等。

4.2 處理器模塊故障

處理器模塊是服務器核心模塊，而且沒有熱備份。處理器模塊的工作異常，就意味著整臺服務器的工作狀態會出錯。處理器模塊上有兩個網絡端口，一個負責文件傳輸，一個負責編、解碼的控制；有兩個同步信號端口，為服務器內部編、解碼提供同步信號。而處理器模塊的故障一般包含以下幾個方面。

4.2.1 網絡故障

網絡故障的判斷過程中，若以太網狀態指示燈呈藍色閃爍則表示網絡存在故障問題，這時外部設備不能正常訪問服務器。網絡故障的原因可能是系統內交換機和連接的線纜故障造成的，這時更換網線及交換機端口即可解決。

4.2.2 同步信號故障

對同步信號故障，其狀態指示燈呈深藍色，則表示沒有同步信號接入。此時可認為是同步信號故障。同步信號丟失會導致服務器編、解碼信號間斷性閃黑。這時更換同步信號源，若問題得以解決，那么說明是外部同步信號源的問題。若是處理器模塊內部發生故障，那么只能返廠維修。

4.3 I/O模塊故障

查看I/O模塊狀態指示燈，若是關閉狀態，則表示模塊故障。這時登錄SystemManager軟件，進入模塊屬性頁，點擊“Winkon”按鈕打開模塊狀態燈，找到具體模塊，停止模塊上所有播放通道的工作，點擊Reboot重啟。若故障還不能得到解決，那么返廠維修。

4.4 電源故障

結合服務器背板各個電源模塊的指示燈判斷電源模塊是否故障，發現電源模塊故障時，拔除電源線后，直接更換電源模塊即可。

5 結語

硬盤播出系統的維護和應急處理，是一個較為系統的工程，涉及到整個系統的方方面面，一旦某個環節出現問題，就可能導致播出事故甚至是停播，這在電視臺的安全播出中是絕對不允許的。所以我們一定要高度重視硬盤播出系統的日常維護，要熟悉整個系統的設計布局，一旦出現問題要及時找出問題的節點，在保證安全播出的情況下，盡快解決問題。此外，要有完善的應急預案，通過日常維修，把可能會出現問題的環節提前處理，使安全播出的風險降到最低。