陳　晨，殷海兵

(中國計(jì)量學(xué)院 信息工程學(xué)院，浙江 杭州 310018)

?

基于嵌入式流媒體服務(wù)器的視頻點(diǎn)播系統(tǒng)

陳晨，殷海兵

(中國計(jì)量學(xué)院 信息工程學(xué)院，浙江 杭州 310018)

移動(dòng)通信網(wǎng)絡(luò)流媒體服務(wù)資費(fèi)較高，限制了人們?cè)跊]有有線電視、寬帶互聯(lián)網(wǎng)連接、無線WiFi互聯(lián)網(wǎng)連接的地方用手機(jī)收看視音頻節(jié)目。針對(duì)這一現(xiàn)狀，提出了一種基于嵌入式流媒體服務(wù)器的多功能視頻點(diǎn)播系統(tǒng)。以ARM板和WiFi網(wǎng)絡(luò)適配器作為流媒體服務(wù)器，設(shè)計(jì)一款A(yù)ndroid手機(jī)播放器作為客戶端，實(shí)現(xiàn)在智能手機(jī)上、多個(gè)客戶端同時(shí)免流量接收服務(wù)器本地或外接設(shè)備推送的高清、超高清視頻。該系統(tǒng)適用于公交、廣場(chǎng)、電梯、商場(chǎng)、景區(qū)等場(chǎng)合，人們用手機(jī)觀看視音頻，實(shí)現(xiàn)不用耗費(fèi)自己的流量，自由快速地選擇自己喜歡的節(jié)目。

流媒體服務(wù)器；安卓播放器；視頻點(diǎn)播；視頻壓縮

全球每天有超過1億部Android設(shè)備被激活，安卓手機(jī)因其開源操作系統(tǒng)、開源社區(qū)支持、強(qiáng)大的開發(fā)工具而占據(jù)智能手機(jī)主流。但是眾所周知，手機(jī)流量資費(fèi)較高，人們用手機(jī)收看視音頻節(jié)目會(huì)受到相應(yīng)數(shù)據(jù)流量套餐的限制?；谥悄苁謾C(jī)在流媒體服務(wù)方面，使用用戶多、流量資費(fèi)高的現(xiàn)狀，推出了一種基于嵌入式流媒體服務(wù)器的視頻點(diǎn)播系統(tǒng)。為了滿足廣大用戶觀看高清、超高清視頻的需求，要求高清、超高清視頻在流媒體服務(wù)器傳輸過程中，低功耗、失真小，本系統(tǒng)設(shè)計(jì)了一種對(duì)原始圖像幀無損壓縮算法，通過圖像壓縮編碼技術(shù)來降低圖像冗余度，從而減小圖像的存儲(chǔ)容量[1]。相應(yīng)的，需要開發(fā)新的Android手機(jī)播放器，對(duì)本發(fā)明中特定的編碼技術(shù)進(jìn)行解碼，正常播放視頻節(jié)目。

本文設(shè)計(jì)的多功能視頻點(diǎn)播系統(tǒng)，基于嵌入式流媒體的服務(wù)器[2]既可以存儲(chǔ)外接設(shè)備的視音頻，又可以對(duì)外接公共場(chǎng)合攝像機(jī)得到的原始視頻進(jìn)行無損壓縮存儲(chǔ)，最終安卓手機(jī)客戶端制作兩個(gè)界面，一個(gè)是播放列表、一個(gè)是監(jiān)控列表。播放列表供人們自由選擇流媒體服務(wù)器存儲(chǔ)的視音頻，監(jiān)控列表顯示在商場(chǎng)或景區(qū)一些人口密集場(chǎng)合，方便用戶快速選擇距離近且人少的場(chǎng)地，另外也可為工作人員(保安、安防人員)提供公共場(chǎng)所安全情況視頻展示，方便不同客戶自由點(diǎn)播自己喜歡的節(jié)目或者用手機(jī)接收視頻畫面，清楚了解商場(chǎng)、景區(qū)等動(dòng)向，方便出行和工作。在計(jì)算機(jī)網(wǎng)絡(luò)中，多播[3]技術(shù)是在一個(gè)單一傳輸源，同時(shí)把消息或信息傳輸?shù)揭唤M目標(biāo)計(jì)算機(jī)。多播是實(shí)現(xiàn)IP組播最常用的，經(jīng)常用于互聯(lián)網(wǎng)協(xié)議(IP)的流媒體和網(wǎng)絡(luò)電視的應(yīng)用程序。多播概念的實(shí)現(xiàn)產(chǎn)生于路由級(jí)別，路由器在發(fā)送數(shù)據(jù)信息到多播目的地址時(shí)，創(chuàng)建最佳的分配路徑。類似多播的應(yīng)用還有視頻流媒體服務(wù)的需求、網(wǎng)絡(luò)游戲、音頻或視頻會(huì)議新技術(shù)等。因此，選擇多播技術(shù)和手機(jī)客戶端接收節(jié)目信號(hào)相結(jié)合，發(fā)明一個(gè)低成本、免流量資費(fèi)、終端用戶多、便攜式的設(shè)備是一項(xiàng)有意義的推進(jìn)。

1　現(xiàn)有技術(shù)闡述與分析

已有技術(shù)1：無損壓縮算法JPEG-LS，把當(dāng)前像素鄰近的幾個(gè)已編碼像素作為其上下文進(jìn)行預(yù)測(cè)，得到預(yù)測(cè)殘差，并對(duì)這些殘差采用Golomb指數(shù)編碼。該算法只用了上下文預(yù)測(cè)與Golomb指數(shù)編碼，沒有用DCT變換和算術(shù)編碼，算法簡(jiǎn)單，易于硬件實(shí)現(xiàn)。

已有技術(shù)2：CALIC算法，采用GAP(梯度自適應(yīng)預(yù)測(cè)器)對(duì)圖像進(jìn)行預(yù)測(cè)。根據(jù)預(yù)測(cè)鄰域水平方向和垂直方向的局部梯度來判斷圖像是否存在邊界以及邊界的強(qiáng)弱，并根據(jù)計(jì)算的結(jié)果動(dòng)態(tài)調(diào)整預(yù)測(cè)函數(shù)從而得到預(yù)測(cè)殘差。對(duì)預(yù)測(cè)殘差采用基于CACM++的自適應(yīng)算術(shù)編碼器進(jìn)行編碼。

已有技術(shù)3：一種媒體內(nèi)容共享系統(tǒng)中的媒體文件點(diǎn)播方法，關(guān)鍵技術(shù)是EPG在運(yùn)營支撐系統(tǒng)OSS和終端之間作為媒介，配合URL，實(shí)現(xiàn)終端向分布式流媒體發(fā)送媒體文件服務(wù)請(qǐng)求后，可以正常接收到點(diǎn)播媒體文件的文件流并進(jìn)行點(diǎn)播。

已有技術(shù)4：一種點(diǎn)播多媒體消息業(yè)務(wù)的方法及系統(tǒng)。在數(shù)據(jù)業(yè)務(wù)管理平臺(tái)、多媒體消息中心、用戶之間開展點(diǎn)播源的傳輸，又設(shè)計(jì)了多媒體消息中心對(duì)接收到的多媒體消息進(jìn)行判斷的功能，根據(jù)用戶的需求，決定點(diǎn)播流程是繼續(xù)或終止。

已有技術(shù)5：智能手機(jī)已經(jīng)開發(fā)了很多播放器。

然而現(xiàn)有技術(shù)都存在一些缺陷，由此更體現(xiàn)本系統(tǒng)提出的必要性。

已有技術(shù)1的缺陷：壓縮率比較低。本發(fā)明塊級(jí)/分層自適應(yīng)幀內(nèi)預(yù)測(cè)、殘差系統(tǒng)半定長(zhǎng)變長(zhǎng)編碼(Variable-Length Coding，VLC)、控制字段Huffman變長(zhǎng)編碼的多技術(shù)協(xié)作無損壓縮使壓縮率能達(dá)到50%左右。

已有技術(shù)2的缺陷：是對(duì)整幅圖像進(jìn)行預(yù)測(cè)，預(yù)測(cè)效率較低。本發(fā)明中采用的宏塊自適應(yīng)幀內(nèi)預(yù)測(cè)，支持兩種預(yù)測(cè)模式，即塊級(jí)預(yù)測(cè)和分層預(yù)測(cè)。其中，塊級(jí)預(yù)測(cè)支持水平和垂直方向的塊間和像素級(jí)預(yù)測(cè)，分層預(yù)測(cè)支持水平和垂直方向的平均和復(fù)制預(yù)測(cè)。每個(gè)宏塊根據(jù)殘差編碼比特和控制信息比特，優(yōu)先選擇預(yù)測(cè)效率高者為最優(yōu)的預(yù)測(cè)模式，提高預(yù)測(cè)效率。

已有技術(shù)3和4的視頻點(diǎn)播過程比較繁瑣，不適合在公交、電梯、景區(qū)、商場(chǎng)等小型場(chǎng)合人們的日常生活需求。本發(fā)明裝置簡(jiǎn)單，成本低，免流量資費(fèi)，終端用戶多，采用便攜式的設(shè)備，方便小型場(chǎng)合以簡(jiǎn)易且價(jià)格低廉的ARM板作為服務(wù)器，廣大人民群眾用自己的Android手機(jī)作為客戶端，實(shí)現(xiàn)在智能手機(jī)上，多個(gè)客戶端同時(shí)免流量接收服務(wù)器本地或外接設(shè)備推送的高清、超高清視頻，不同客戶可以自由點(diǎn)播喜歡的節(jié)目或者用手機(jī)接收的視頻畫面清楚了解商場(chǎng)、景區(qū)等的動(dòng)向，方便自己的出行和工作。

相比已有技術(shù)5，本發(fā)明開發(fā)的播放器針對(duì)特定的應(yīng)用，即服務(wù)器上的流媒體文件、對(duì)某些特定場(chǎng)合錄像的原始視頻點(diǎn)播，能滿足特定的需求，即在電梯、車載、公交、小型廣場(chǎng)、景區(qū)等場(chǎng)合廣大用戶的利益?？蓪?shí)現(xiàn)特定功能，即能滿足對(duì)服務(wù)器已有視音頻文件和經(jīng)無損壓縮算法編碼得到的視頻解碼回放。

2　系統(tǒng)整體方案

本系統(tǒng)涉及多播技術(shù)、原始圖像幀無損壓縮、UDP[4]控制流、 RTSP[5]傳輸流、流媒體服務(wù)器、智能手機(jī)點(diǎn)播的系統(tǒng)方法，最終能達(dá)到在一定區(qū)域內(nèi)，多個(gè)手機(jī)自由、免費(fèi)、快速地點(diǎn)播服務(wù)器本地或外接設(shè)備視音頻。主要步驟有：1)將Linux系統(tǒng)內(nèi)核設(shè)置為支持多播技術(shù)；2)ARM板本地或外接設(shè)備存儲(chǔ)的原始圖像幀以宏塊為預(yù)測(cè)編碼的基本單元，支持宏塊隨機(jī)訪問，實(shí)現(xiàn)無損壓縮；3)壓縮編碼后的視頻節(jié)目及外接設(shè)備存儲(chǔ)的完整視音頻通過WiFi網(wǎng)絡(luò)適配器傳輸給安卓手機(jī)客戶端，多個(gè)客戶端通過UDP和RTSP協(xié)議實(shí)現(xiàn)控制和流傳輸；4)多個(gè)智能手機(jī)終端接收到數(shù)據(jù)資源，顯示節(jié)目列表，點(diǎn)播視頻進(jìn)行信源解碼和回放。系統(tǒng)結(jié)構(gòu)如圖1所示。

圖1　系統(tǒng)結(jié)構(gòu)圖

3　基于嵌入式流媒體服務(wù)器的視頻點(diǎn)播系統(tǒng)

3.1視頻點(diǎn)播步驟

首先，ARM板搭建多播環(huán)境，允許多個(gè)客戶端同時(shí)接入流媒體服務(wù)器，編譯、安裝live555，建立RTSP協(xié)議流傳輸連接[6]。多播是一種網(wǎng)絡(luò)協(xié)議操作，允許一個(gè)源同時(shí)發(fā)送數(shù)據(jù)包到多個(gè)端點(diǎn)。多播要求高帶寬，點(diǎn)到面應(yīng)用，如分布式計(jì)算、高定義視頻流、存儲(chǔ)區(qū)域網(wǎng)絡(luò)。從傳統(tǒng)意義上講，多播是實(shí)施電子在路由器的網(wǎng)絡(luò)層中，通過復(fù)制和存儲(chǔ)在緩沖區(qū)中的數(shù)據(jù)包。然而，通過在網(wǎng)絡(luò)協(xié)議棧的光層遷移組播操作，基于分組的多種功能可以較低的成本得到支持。ARM開發(fā)板結(jié)合live555，它是目前實(shí)現(xiàn)rtsp協(xié)議使用最多、用途最廣的開源代碼，而且它的更新速度很快，方便研究人員根據(jù)不同需求開發(fā)新功能。Live555已經(jīng)實(shí)現(xiàn)了基于UDP和TCP的傳輸，支持MPG，MKV，H.264，AMR等文件的點(diǎn)播，有服務(wù)器端和客戶端兩種實(shí)現(xiàn)方式。由于本系統(tǒng)是在一個(gè)多播環(huán)境下實(shí)現(xiàn)的，所以需要對(duì)其中GroupSock和LiveMedia兩大模塊進(jìn)行設(shè)計(jì)和編譯，生成可執(zhí)行文件live555MediaServer_IMX6S，在后續(xù)過程中調(diào)用。

流式傳輸是流媒體技術(shù)實(shí)現(xiàn)的重要部分。為了保證數(shù)據(jù)能夠正確完整地傳輸，在傳輸之前要對(duì)流媒體服務(wù)器外接設(shè)備傳送的原始視頻進(jìn)行預(yù)處理，即對(duì)原始視頻采取高效壓縮。本文中采用塊級(jí)/分層自適應(yīng)幀內(nèi)預(yù)測(cè)、殘差系統(tǒng)半定長(zhǎng)變長(zhǎng)編碼(Variable-Length Coding，VLC)、控制字段Huffman變長(zhǎng)編碼的多技術(shù)協(xié)作無損壓縮系統(tǒng)方案；提出的自適應(yīng)高效幀內(nèi)預(yù)測(cè)，支持不同區(qū)域不同小塊自適應(yīng)編碼，支持宏塊級(jí)數(shù)據(jù)隨機(jī)訪問；并基于編碼比特消耗最小化的原則，在預(yù)測(cè)效率和預(yù)測(cè)殘差編碼比特效率之間平衡。對(duì)原始視頻進(jìn)行無損壓縮包括兩大步驟：預(yù)測(cè)和熵編碼。1)基于宏塊的自適應(yīng)幀內(nèi)預(yù)測(cè)。它支持兩種預(yù)測(cè)模式，即塊級(jí)預(yù)測(cè)和分層預(yù)測(cè)。其中，塊級(jí)預(yù)測(cè)支持水平和垂直方向的塊間和像素級(jí)預(yù)測(cè)，分層預(yù)測(cè)支持水平和垂直方向的平均和復(fù)制預(yù)測(cè)。每個(gè)宏塊根據(jù)殘差編碼比特和控制信息比特，優(yōu)先選擇預(yù)測(cè)效率高者為最優(yōu)的預(yù)測(cè)模式。2)基于小塊的半定長(zhǎng)變長(zhǎng)編碼。它將預(yù)測(cè)殘差自適應(yīng)劃分為8個(gè)變長(zhǎng)的編碼區(qū)間，并用相應(yīng)的字段標(biāo)識(shí)，對(duì)這些字段采用Huffman編碼，并將每個(gè)區(qū)間內(nèi)的殘差自適應(yīng)分為不同大小的塊，塊內(nèi)采用定長(zhǎng)編碼[7-9]。高效壓縮算法結(jié)構(gòu)如圖2所示。

圖2　高效壓縮算法

基于對(duì)視頻進(jìn)行高效壓縮使數(shù)據(jù)量減少，且對(duì)視頻不要求分組順序到達(dá)，本文ARM系統(tǒng)實(shí)現(xiàn)流媒體服務(wù)器，選擇在數(shù)據(jù)傳輸過程中延遲小、數(shù)據(jù)傳輸效率高的Socket的UDP雙向通信。雖然UDP是無連接通信，但是本系統(tǒng)實(shí)現(xiàn)發(fā)送端和接收端的雙向通信。多個(gè)智能手機(jī)終端通過UDP協(xié)議獲取服務(wù)器所有高效處理過的視頻包含路徑、名稱的列表。設(shè)計(jì)在手機(jī)端列表只顯示名稱。

通過WiFi網(wǎng)絡(luò)適配器實(shí)現(xiàn)一個(gè)WiFi連接熱點(diǎn)，根據(jù)手機(jī)端列表的路徑找到視頻節(jié)目源，基于RTSP流媒體傳輸協(xié)議在客戶端(智能手機(jī))和流媒體服務(wù)器之間建立流媒體傳輸連接，實(shí)現(xiàn)視音頻數(shù)據(jù)流(RTSP數(shù)據(jù)流)到手機(jī)的傳輸。服務(wù)器端和手機(jī)終端播放器通信流程，如圖3所示。

圖3　服務(wù)器端與客戶端通信流程圖

設(shè)計(jì)Android版本播放器支持對(duì)視頻的編碼方法。通過access(訪問)、 demux(解復(fù)用)、decode(解碼)、output(輸出)主要步驟處理手機(jī)端接收到的節(jié)目信息流，制作兩個(gè)視頻點(diǎn)播界面，即播放列表和監(jiān)控列表。收聽視音頻的用戶可點(diǎn)擊播放列表，播放高清、超高清視頻節(jié)目，完成低功耗視頻點(diǎn)播；在商場(chǎng)、景區(qū)的用戶點(diǎn)擊監(jiān)控列表，對(duì)周圍要去吃飯或游玩的場(chǎng)所有大致了解；安?；蚱渌ぷ魅藛T也可以通過監(jiān)控列表畫面快速知曉公共場(chǎng)合的突發(fā)事件，有利于提高工作效率。

3.2視頻點(diǎn)播效果及分析

用戶安裝本系統(tǒng)的安卓手機(jī)播放器后，在一定范圍內(nèi)，打開網(wǎng)絡(luò)流界面，輸入服務(wù)器的IP地址，基于UDP協(xié)議服務(wù)器在手機(jī)端打印出播放列表和監(jiān)控列表[10]，當(dāng)一個(gè)或多個(gè)客戶端選擇資源后，通過UDP協(xié)議將控制信息發(fā)給流媒體服務(wù)器，通過建立的RTSP連接，手機(jī)端接收RTSP數(shù)據(jù)流正常播放視音頻。如圖4所示。因此，本文多功能視頻點(diǎn)播系統(tǒng)產(chǎn)生的有益效果主要有以下幾點(diǎn)：1)對(duì)ARM板及其外接設(shè)備的原始圖像無損壓縮，為整個(gè)裝置低功耗做基礎(chǔ)，達(dá)到視頻傳輸速率快、失真少的目的；2)在服務(wù)器的WiFi連接熱點(diǎn)內(nèi)，智能手機(jī)終端出現(xiàn)服務(wù)器視頻節(jié)目選單，包括外接設(shè)備傳輸?shù)椒?wù)器的視音頻，和錄像設(shè)備傳輸?shù)椒?wù)器并經(jīng)過壓縮的文件，手機(jī)播放器顯示播放列表和監(jiān)控列表；3)多個(gè)智能手機(jī)可同時(shí)接入流媒體服務(wù)器，通過播放器顯示的選單，不同用戶分別選擇不同的資源，或同時(shí)選擇同一個(gè)資源，可隨時(shí)切換，安卓手機(jī)能夠?qū)o損壓縮編碼的視頻源解碼，正常流暢地播放文件，實(shí)現(xiàn)免流量接收視音頻。

圖4　視頻點(diǎn)播效果(截圖)

4　小結(jié)

本文采用的便攜式流媒體服務(wù)器視頻點(diǎn)播低功耗裝置，解決了服務(wù)器外接公共場(chǎng)合攝像機(jī)得到的原始視頻如何進(jìn)行無損壓縮、壓縮編碼后的數(shù)據(jù)和流媒體服務(wù)器外接設(shè)備存儲(chǔ)的視音頻流如何傳輸給智能手機(jī)、手機(jī)客戶端如何接收節(jié)目信息列表并對(duì)壓縮編碼視頻源解碼播放、以及怎樣實(shí)現(xiàn)多個(gè)客戶端同時(shí)點(diǎn)播視頻等難題，實(shí)現(xiàn)在沒有互聯(lián)網(wǎng)接入的情況下，多個(gè)用戶同時(shí)接收大量視音頻。不僅減少安卓手機(jī)用戶的流量消耗，還可以給不同客戶的工作或游玩帶來更快更明顯的便利，所以，本系統(tǒng)具有較高的推廣和應(yīng)用價(jià)值。

[1]KIM J，KYUNG C M.A lossless embedded compression using significant bit truncation for HD video coding[J].IEEE transactions on circuit and systems for video technology，2010，20(6)：810-849.

[2]曾金.嵌入式流媒體服務(wù)器的設(shè)計(jì)和實(shí)現(xiàn)[D].南京：南京郵電大學(xué)，2011.

[3]趙鵬.視頻流媒體多播系統(tǒng)技術(shù)的研究[D].大慶：大慶石油學(xué)院，2008.

[4]王艷芳，戴永.基于UDP的數(shù)據(jù)可靠傳輸技術(shù)研究與應(yīng)用[J].計(jì)算機(jī)工程與應(yīng)用，2010，46(3)：105-108.

[5]劉大紅.基于RTSP流媒體服務(wù)器的設(shè)計(jì)與實(shí)現(xiàn)[D].西安：西安電子科技大學(xué)，2013.

[6]譚石堅(jiān).嵌入式VOD系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn) [D].廣州：華南理工大學(xué)，2010.

[7]XIN L，MICHAEL T O．Edge-directed prediction for lossless compression of natural images[J]. IEEE transactions on image processing，2001，10(6)：813-815.

[8]OKANO F，KANAZAWA M，HAMASAKI K，et al. Ultradefinition television system with 4000 scanning lines[R].London，UK：Broadcasters Broadcast，2004.

[9]NIKARA J，VASSILIADIS S，TAKALA J，et al. Multiple-symbol parallel decoding for variable length codes[J].IEEE transactions very-large-scale integration systems，2004，12(7)：676-685.

[10]朱哲先.視頻監(jiān)控中流媒體數(shù)據(jù)轉(zhuǎn)發(fā)平臺(tái)的研究和實(shí)現(xiàn)[D].南京：南京郵電大學(xué)，2014.

陳晨(1991— )，女，碩士生，主研無損視頻壓縮、嵌入式計(jì)算機(jī)網(wǎng)絡(luò)；

殷海兵(1974— )，教授，碩士生導(dǎo)師，主要研究方向?yàn)橐曨l編解碼、芯片結(jié)構(gòu)設(shè)計(jì)和圖像處理。

責(zé)任編輯：許盈

VOD system based on embedded streaming media server

CHEN Chen, YIN Haibing

(CollegeofInformationEngineering,ChinaJiliangUniversity,Hangzhou310018,China)

Mobile communication network streaming media service charges is higher, where is no cable TV, broadband Internet connections, wireless WiFi Internet connection, people using mobile phone for audio program is limited by a lot. Aimed at the status quo, a kind of multifunctional video on demand system is put forward based on embedded streaming media server. With the ARM board and WiFi network adapter as a streaming media server, an Android mobile player is designed as the client, implementation on smart phones, multiple clients at the same time avoid traffic receiving server or an external device to push local HD, high-definition video. The system is suitable for bus, square, elevators, shopping malls, the scenic area, etc, and people use mobile phones to watch audio. They don’t have to take their mobile phone flow, and can choose their favorite programs free and fast.

streaming media server; Android player; VOD; video compression

TP393

A

10.16280/j.videoe.2016.09.008

浙江省自然科學(xué)基金項(xiàng)目(LY15F020022)

2015-12-22

文獻(xiàn)引用格式：陳晨，殷海兵.基于嵌入式流媒體服務(wù)器的視頻點(diǎn)播系統(tǒng)[J].電視技術(shù)，2016，40(9)：41-45.

CHEN C，YIN H B. VOD system based on embedded streaming media server[J].Video engineering，2016，40(9)：41-45.