移動終端進行流媒體實時傳送的方法、系統(tǒng)與移動終端的制作方法
【專利摘要】本公開涉及一種移動終端進行流媒體實時傳送的方法、系統(tǒng)與移動終端。該方法包括獲取監(jiān)測到的網絡速度；將監(jiān)測到的網絡速度與設定的一組門限進行比較；查找出與相應門限對應的編解碼參數與傳輸策略，并將查找出的編解碼參數與傳輸策略作為推薦參數；利用推薦參數對移動終端所采集的音視頻信號進行編碼與傳輸。本公開可以根據網絡速度選擇合適的編解碼參數和傳輸策略。
【專利說明】移動終端進行流媒體實時傳送的方法、系統(tǒng)與移動終端

【技術領域】
[0001] 本公開涉及通信領域，特別地，涉及一種移動終端進行流媒體實時傳送的方法、系 統(tǒng)與移動終端。

【背景技術】
[0002] 目前，諸如應急防災應用的許多現場感知應用需要在移動終端上安裝客戶端通過 無線網絡進行現場視音頻采集和播放。由于無線網絡傳輸速率變化頻繁、連接可靠性相對 較低、且移動終端性能的差異較大，這些因素都造成在現有技術架構上實現的移動終端視 音頻采集和播放的不穩(wěn)定、連續(xù)性較差與客戶體驗差等問題。


【發(fā)明內容】

[0003] 本公開鑒于以上問題中的至少一個提出了新的技術方案。
[0004] 本公開在其一個方面提供了一種移動終端進行流媒體實時傳送的方法，其可以根 據網絡速度選擇合適的編解碼參數和傳輸策略。
[0005] 本公開在其另一方面提供了一種移動終端，其可以根據網絡速度選擇合適的編解 碼參數和傳輸策略。
[0006] 本公開在其又一方面提供了一種移動終端進行流媒體實時傳送的系統(tǒng)，其可以根 據網絡速度選擇合適的編解碼參數和傳輸策略。
[0007] 根據本公開，一種移動終端進行流媒體實時傳送的方法，包括：
[0008] 獲取監(jiān)測到的網絡速度；
[0009] 將監(jiān)測到的網絡速度與設定的一組門限進行比較；
[0010] 查找出與相應門限對應的編解碼參數與傳輸策略，并將查找出的編解碼參數與傳 輸策略作為推薦參數；
[0011] 利用推薦參數對移動終端所采集的音視頻信號進行編碼與傳輸。
[0012] 在本公開的一些實施例中，該方法還包括：
[0013] 將推薦參數和其他未推薦的參數一起通知給用戶；
[0014] 接收用戶所選擇的編解碼參數和傳輸策略，并利用用戶選擇的編解碼參數和傳輸 策略更新推薦參數。
[0015] 在本公開的一些實施例中，該方法還包括：
[0016] 利用推薦參數接收、解碼并播放來自流媒體服務平臺的音視頻信號
[0017] 在本公開的一些實施例中，傳輸策略包括傳送的巾貞率。
[0018] 根據本公開，還提供了一種移動終端，包括：
[0019] 網速監(jiān)測單元，用于獲取監(jiān)測到的網絡速度；
[0020] 網速比較單元，用于將監(jiān)測到的網絡速度與設定的一組門限進行比較；
[0021] 參數匹配單元，用于查找出與相應門限對應的編解碼參數與傳輸策略，并將查找 出的編解碼參數與傳輸策略作為推薦參數；
[0022] 信號采集單元，用于采集音視頻信號；
[0023] 編解碼處理單元，用于利用推薦參數中的編解碼參數對移動終端所采集的音視頻 信號進行編碼；
[0024] 信號傳輸單元，用于利用推薦參數中的傳輸策略傳輸編碼后的音視頻信號。
[0025] 在本公開的一些實施例中，移動終端還包括：
[0026] 參數呈現單元，用于將推薦參數和其他未推薦的參數一起通知給用戶；
[0027] 策略接收單元，用于接收用戶所選擇的編解碼參數和傳輸策略，并利用用戶選擇 的編解碼參數和傳輸策略更新推薦參數。
[0028] 在本公開的一些實施例中，信號傳輸單元還利用推薦參數中的傳輸策略接收來自 流媒體服務平臺的音視頻信號；
[0029] 編解碼處理單元還利用推薦參數中的編解碼參數對所接收的信號進行解碼；
[0030] 移動終端還包括播放單元，用于播放解碼后的音視頻信號。
[0031] 在本公開的一些實施例中，傳輸策略包括傳送的巾貞率。
[0032] 根據本公開，還提供了一種利用移動終端進行流媒體實時傳送的系統(tǒng)，包括流媒 體服務平臺和前述實施例中的移動終端。
[0033] 在本公開的技術方案中，由于編解碼參數與傳輸策略的確定與監(jiān)測到的網絡速度 相關，因此，可以選擇與網絡速度相匹配的編解碼參數與傳輸策略，使得用戶可以在各種網 絡環(huán)境下均獲得較好的用戶體驗。

【專利附圖】

【附圖說明】
[0034] 此處所說明的附圖用來提供對本公開的進一步理解，構成本申請的一部分。在附 圖中：
[0035] 圖1是本公開一個實施例的利用移動終端進行流媒體實時傳送的方法的流程示 意圖。
[0036] 圖2是本公開一個實施例的移動終端的結構示意圖。
[0037] 圖3是本公開另一實施例的移動終端的結構示意圖。
[0038] 圖4是本公開又一實施例的移動終端的結構示意圖。
[0039] 圖5是本公開再一實施例的移動終端的結構示意圖。
[0040] 圖6是本公開一個實施例的利用移動終端進行流媒體實時傳送的系統(tǒng)的結構示 意圖。
[0041] 圖7是本公開另一實施例的利用移動終端進行流媒體實現傳輸的系統(tǒng)的結構示 意圖。
[0042] 圖8是基于圖7所示的系統(tǒng)進行流媒體實時傳送的一個實施例的流程示意圖。
[0043] 圖9是基于圖7所示的系統(tǒng)進行流媒體實時傳送的另一實施例的流程示意圖。

【具體實施方式】
[0044] 下面將參照附圖描述本公開。要注意的是，以下的描述在本質上僅是解釋性和示 例性的，決不作為對本公開及其應用或使用的任何限制。除非另外特別說明，否則，在實施 例中闡述的部件和步驟的相對布置以及數字表達式和數值并不限制本公開的范圍。另外， 本領域技術人員已知的技術、方法和裝置可能不被詳細討論，但在適當的情況下意在成為 說明書的一部分。
[0045] 本公開下述實施例在移動終端的客戶端中增加了網絡自適應調節(jié)功能，實現移動 終端在變化的無線網絡環(huán)境下自動選擇合適的或接收用戶選擇的編解碼參數與傳輸策略， 以保證與網絡速度相匹配的良好的客戶體驗。
[0046] 圖1是本公開一個實施例的利用移動終端進行流媒體實時傳送的方法的流程示 意圖。
[0047] 如圖1所示，該實施例可以包括以下步驟：
[0048] S102,獲取監(jiān)測到的網絡速度；
[0049] 一般地，在移動終端內部都設置有無線上網單元，在單元可以為移動終端提供上 網服務。通過對該模塊的上下行流量進行監(jiān)測可以得到當前移動終端的網絡速度。
[0050] S104,將監(jiān)測到的網絡速度與設定的一組門限進行比較；
[0051] 具體地，可以根據需求在移動終端內部設置一組門限值，例如，網速門限1、網速門 限2、…網速門限n，其中，網速門限1〈網速門限2〈網速門限3〈…〈網速門限η。在監(jiān)測 到的移動終端的當前網速小于網速門限1時，可以根據該網速范圍設置與其相匹配的編解 碼參數和傳輸策略；在監(jiān)測到的移動終端的當前網速介于網速門限1與網速門限2之間時， 可以根據該網速范圍設置與其相匹配的編解碼參數和傳輸策略，依此類推，在監(jiān)測到的移 動終端的當前網速大于網速門限η時，可以根據該網速范圍設置與其相匹配的編解碼參數 和傳輸策略。換句話說，即，在移動終端內部存儲了各個網速門限與相應編解碼參數和傳輸 策略的對應關系。
[0052] S106,查找出與相應門限對應的編解碼參數與傳輸策略，并將查找出的編解碼參 數與傳輸策略作為推薦參數；
[0053] 具體地，可以將移動終端的當前網速與上述對應關系相匹配，進行可以查找出與 當前網速相對應的編解碼參數和傳輸策略。由于對應關系中所設置的編解碼參數和傳輸策 略是與某一網速范圍相適應的，因此，可以將查找出的編解碼參數和傳輸策略作為推薦參 數來使用。
[0054] S108,利用推薦參數對移動終端所采集的音視頻信號進行編碼與傳輸；
[0055] 具體地，首先，利用推薦參數中的編解碼參數對移動終端所采集的音視頻信號進 行編碼處理，再利用推薦參數中的傳輸策略來傳輸編碼處理后的音視頻信號。
[0056] 在該實施例中，由于編解碼參數與傳輸策略的確定與監(jiān)測到的網絡速度相關，因 此，可以選擇與網絡速度相匹配的編解碼參數與傳輸策略，使得用戶可以在各種網絡環(huán)境 下均獲得較好的用戶體驗。
[0057] 進一步地，為了更好地提升用戶體驗，在步驟S106之后還可以：
[0058] 將推薦參數和其他未推薦的參數一起通知給用戶；
[0059] 接收用戶所選擇的編解碼參數和傳輸策略，并利用用戶選擇的編解碼參數和傳輸 策略更新推薦參數。
[0060] 之所以將步驟S106中查找到的推薦參數和其他未推薦參數一起通知給用戶是為 了給用戶更多的選擇權，同時將推薦參數與其他未推薦參數相區(qū)別，例如，可以標識出哪個 是推薦參數，哪些是未推薦參數，并注明這些未推薦參數所對應的網絡速度范圍。換句話 說，即可以將前述提到的網速范圍與編解碼參數和傳輸策略的對應關系通過界面反饋給用 戶，并注明那組參數是推薦參數，由用戶根據自己當前的實際需求進行選擇。
[0061] 進一步地，在接收方向上，移動終端還可以利用推薦參數中的傳輸策略接收來自 流媒體服務平臺的音視頻信號，并利用推薦參數中的編解碼參數對接收來的音視頻信號進 行解碼，再播放解碼后的音視頻信號。
[0062] 其中，在上述實例中，傳輸策略可以包括但不限于傳送的幀率。具體地，可以在網 速較高的情況下，為其設置較高的傳送幀率；在網速較低的情況下，為其設置較低的傳送幀 率。
[0063] 本領域普通技術人員可以理解，實現上述方法實施例的全部和部分步驟可以通過 程序指令相關的硬件來完成，前述的程序可以存儲于一計算設備可讀取存儲介質中，該程 序在執(zhí)行時，執(zhí)行包括上述方法實施例的步驟，而前述的存儲介質可以包括ROM、RAM、磁碟 和光盤等各種可以存儲程序代碼的介質。
[0064] 圖2是本公開一個實施例的移動終端的結構示意圖。
[0065] 如圖2所示，該實施例中的移動終端20可以包括網速監(jiān)測單元202、網速比較單元 204、參數匹配單元206、信號采集單元208、編解碼處理單元210和信號傳輸單元212。其 中，
[0066] 網速監(jiān)測單元202,用于獲取監(jiān)測到的網絡速度；
[0067] 網速比較單元204,用于將監(jiān)測到的網絡速度與設定的一組門限進行比較；
[0068] 參數匹配單元206,用于查找出與相應門限對應的編解碼參數與傳輸策略，并將查 找出的編解碼參數與傳輸策略作為推薦參數；
[0069] 信號采集單元208,用于采集音視頻信號；
[0070] 編解碼處理單元210,用于利用推薦參數中的編解碼參數對移動終端所采集的音 視頻信號進行編碼；
[0071] 信號傳輸單元212,用于利用推薦參數中的傳輸策略傳輸編碼后的音視頻信號。
[0072] 在該實施例中，由于編解碼參數與傳輸策略的確定與監(jiān)測到的網絡速度相關，因 此，可以選擇與網絡速度相匹配的編解碼參數與傳輸策略，使得用戶可以在各種網絡環(huán)境 下均獲得較好的用戶體驗。
[0073] 圖3是本公開另一實施例的移動終端的結構示意圖。
[0074] 如圖3所示，與圖2中的實施例相比，該實施例中的移動終端30還可以包括參數 呈現單元302和策略接收單元304。其中，
[0075] 參數呈現單元302,用于將推薦參數和其他未推薦的參數一起通知給用戶；
[0076] 策略接收單元304,用于接收用戶所選擇的編解碼參數和傳輸策略，并利用用戶選 擇的編解碼參數和傳輸策略更新推薦參數。
[0077] 在該實施例中，將查找到的推薦參數和其他未推薦參數一起通知給用戶是為了給 用戶更多的選擇權，同時將推薦參數與其他未推薦參數相區(qū)別，例如，可以標識出哪個是推 薦參數，哪些是未推薦參數，并注明這些未推薦參數所對應的網絡速度范圍。換句話說，即 可以將前述提到的網速范圍與編解碼參數和傳輸策略的對應關系通過界面反饋給用戶，并 注明那組參數是推薦參數，由用戶根據自己當前的實際需求進行選擇。
[0078] 圖4是本公開又一實施例的移動終端的結構示意圖。
[0079] 如圖4所示，與圖2中的實施例相比，該實施例中的移動終端40還可以包括播放 單元402，其用于播放解碼后的音視頻信號。
[0080] 進一步地，信號傳輸單元還利用推薦參數中的傳輸策略接收來自流媒體服務平臺 的音視頻信號；編解碼處理單元還利用推薦參數中的編解碼參數對所接收的信號進行解 碼；
[0081] 圖5是本公開再一實施例的移動終端的結構示意圖。
[0082] 如圖5所示，與圖4中的實施例相比，該實施例中的移動終端50還可以包括如圖 3所示的參數呈現單元302和策略接收單元304。其中，
[0083] 參數呈現單元302,用于將推薦參數和其他未推薦的參數一起通知給用戶；
[0084] 策略接收單元304,用于接收用戶所選擇的編解碼參數和傳輸策略，并利用用戶選 擇的編解碼參數和傳輸策略更新推薦參數。
[0085] 在上述實施例中，傳輸策略可以包括但不限于傳送的幀率。
[0086] 圖6是本公開一個實施例的利用移動終端進行流媒體實時傳送的系統(tǒng)的結構示 意圖。
[0087] 如圖6所示，該實施例中的系統(tǒng)60可以包括流媒體服務平臺602和移動終端604。 其中，移動終端604可以通過前述實施例實現。
[0088] 圖7是本公開另一實施例的利用移動終端進行流媒體實現傳輸的系統(tǒng)的結構示 意圖。
[0089] 如圖7所示，在移動終端側的客戶端中可以包括：信號采集單元208、播放單元 402、編解碼處理單元210、信號傳輸單元212和網絡自適應調節(jié)器702,其中網絡自適應調 節(jié)器702又可以包括網速監(jiān)測單元702a、編解碼參數調節(jié)單元702b、傳輸策略調節(jié)單元 702c以及策略配置接口。其中，網速監(jiān)測單元702a可以執(zhí)行網速監(jiān)測單元202和網速比較 單元204的功能。
[0090] 另外，移動終端側的無線上網單元704與網絡自適應調節(jié)器中的網速監(jiān)測單元相 連，平臺側的流媒體服務平臺602可以通過無線方式與移動終端側的傳輸單元相連。
[0091] 圖8是基于圖7所示的系統(tǒng)進行流媒體實時傳送的一個實施例的流程示意圖。
[0092] 如圖8所示，該流程可以包括以下步驟：
[0093] S802,網絡自適應調節(jié)器中的網速監(jiān)測單元對移動終端的網速進行監(jiān)測；
[0094] S804,網絡自適應調節(jié)器根據監(jiān)測到的網速確定對應的編解碼參數和傳輸策略， 例如，當網速低于設定的門限值，網絡自適應調節(jié)器會限定當前傳送的幀率等參數，使得流 媒體畫面質量及視音頻同步等效果得以保證，當網速達到設定的門限值，網絡自適應調節(jié) 器會調整當前傳送的幀率等參數，在保證流媒體畫面質量的同時縮短流媒體傳送的時延；
[0095] S806,網絡自適應調節(jié)器將根據移動終端當前網速確定出的編解碼參數發(fā)送至編 解碼處理單元；
[0096] S808,網絡自適應調節(jié)器將根據移動終端當前網速確定出的傳輸策略發(fā)送至信號 傳輸單兀；
[0097] S810,信號采集單元將采集到的音視頻信號發(fā)送至編解碼處理單元；
[0098] S812,編解碼處理單元根據接收到的編解碼參數對音視頻信號進行編碼；
[0099] S814,編解碼處理單元將編碼后的信號發(fā)送至信號傳輸單元；
[0100] S816,信號傳輸單元根據接收到的傳輸策略將來自編解碼處理單元的音視頻信號 傳輸至流媒體服務平臺。
[0101] 圖9是基于圖7所示的系統(tǒng)進行流媒體實時傳送的另一實施例的流程示意圖。
[0102] 如圖9所示，該流程可以包括以下步驟：
[0103] S902,網絡自適應調節(jié)器中的網速監(jiān)測單元對移動終端的網速進行監(jiān)測；
[0104] S904,網絡自適應調節(jié)器根據監(jiān)測到的網速確定對應的編解碼參數和傳輸策略；
[0105] S906,網絡自適應調節(jié)器將所確定的編解碼參數和傳輸策略作為推薦參數與其他 非推薦參數一起通過界面告知使用的用戶，其中，在用戶界面上可以顯示移動終端的當前 網速、推薦的參數和其他各個網速門限以及相對應的非推薦參數；
[0106] S908,隨著無線網絡速率的變化，用戶可以根據當前的網速選擇網絡自適應策略 進行編解碼和傳輸，調節(jié)網絡自適應調節(jié)器接收所選擇的編解碼參數和傳輸策略，其中，用 戶所選擇的編解碼參數和傳輸策略既可以是所推薦的參數也可以是非推薦的參數；
[0107] S910,網絡自適應調節(jié)器將用戶所選擇的編解碼參數發(fā)送至編解碼處理單元；
[0108] S912,網絡自適應調節(jié)器將用戶所選擇的傳輸策略發(fā)送至信號傳輸單元；
[0109] S914,信號采集單元將采集到的音視頻信號發(fā)送至編解碼處理單元；
[0110] S916,編解碼處理單元根據接收到的編解碼參數對音視頻信號進行編碼；
[0111] S918,編解碼單元將編碼后的信號發(fā)送至信號傳輸單元；
[0112] S920,信號傳輸單元根據接收到的傳輸策略將來自編解碼處理單元的音視頻信號 傳輸至流媒體服務平臺。
[0113] 此外，在上述圖8和圖9所示的實施例中，在移動終端客戶端接收到來自流媒體服 務平臺發(fā)送的音視頻信號后，也可以基于網速確定的或用戶選擇的編解碼參數和傳輸策略 對接收的音視頻信號依次進行接收、解碼和播放。
[0114] 本說明書中各個實施例均采用遞進的方式描述，每個實施例重點說明的都是與其 他實施例的不同之處，各個實施例之間相同和相似的部分可以相互參見。對于裝置實施例 而言，由于其與方法實施例基本相似，所以描述的比較簡單，相關之處可以參見方法實施例 部分的說明。
[0115] 本公開上述實施例具有以下優(yōu)點：
[0116] (1)通過對編解碼參數的自動調節(jié)提升了在無線網絡環(huán)境下流媒體采集與播放的 效果。
[0117] (2)通過對傳輸策略的自動調節(jié)可以更好地滿足流媒體采集與播放的連續(xù)性和實 時性要求。
[0118] (3)用戶可以自行選擇流媒體傳送策略，因此流媒體的采集與播放效果一般能符 合用戶的預期，提升了用戶體驗。
[0119] 雖然已參照示例性實施例描述了本公開，但應理解，本公開不限于上述的示例性 實施例。對于本領域技術人員顯然的是，可以在不背離本公開的范圍和精神的條件下修改 上述的示例性實施例。所附的權利要求的范圍應被賦予最寬的解釋，以包含所有這樣的修 改以及等同的結構和功能。
【權利要求】
1. 一種利用移動終端進行流媒體實時傳送的方法，其特征在于，包括： 獲取監(jiān)測到的網絡速度； 將監(jiān)測到的網絡速度與設定的一組門限進行比較； 查找出與相應門限對應的編解碼參數與傳輸策略，并將查找出的編解碼參數與傳輸策 略作為推薦參數； 利用所述推薦參數對所述移動終端所采集的音視頻信號進行編碼與傳輸。
2. 根據權利要求1所述的利用移動終端進行流媒體實時傳送的方法，其特征在于，所 述方法還包括： 將所述推薦參數和其他未推薦的參數一起通知給用戶； 接收用戶所選擇的編解碼參數和傳輸策略，并利用所述用戶選擇的編解碼參數和傳輸 策略更新所述推薦參數。
3. 根據權利要求1或2所述的利用移動終端進行流媒體實時傳送的方法，其特征在于， 所述方法還包括： 利用所述推薦參數接收、解碼并播放來自流媒體服務平臺的音視頻信號。
4. 根據權利要求1所述的利用移動終端進行流媒體實時傳送的方法，其特征在于，所 述傳輸策略包括傳送的幀率。
5. -種移動終端，其特征在于，包括： 網速監(jiān)測單元，用于獲取監(jiān)測到的網絡速度； 網速比較單元，用于將監(jiān)測到的網絡速度與設定的一組門限進行比較； 參數匹配單元，用于查找出與相應門限對應的編解碼參數與傳輸策略，并將查找出的 編解碼參數與傳輸策略作為推薦參數； 信號采集單元，用于采集音視頻信號； 編解碼處理單元，用于利用所述推薦參數中的編解碼參數對所述移動終端所采集的音 視頻信號進行編碼； 信號傳輸單元，用于利用所述推薦參數中的傳輸策略傳輸編碼后的音視頻信號。
6. 根據權利要求5所述的移動終端，其特征在于，所述移動終端還包括： 參數呈現單元，用于將所述推薦參數和其他未推薦的參數一起通知給用戶； 策略接收單元，用于接收用戶所選擇的編解碼參數和傳輸策略，并利用所述用戶選擇 的編解碼參數和傳輸策略更新所述推薦參數。
7. 根據權利要求5所述的移動終端，其特征在于， 所述信號傳輸單元還利用所述推薦參數中的傳輸策略接收來自流媒體服務平臺的音 視頻信號； 所述編解碼處理單元還利用所述推薦參數中的編解碼參數對所接收的信號進行解 碼； 所述移動終端還包括播放單元，用于播放解碼后的音視頻信號。
8. 根據權利要求5所述的移動終端，其特征在于，所述傳輸策略包括傳送的幀率。
9. 一種利用移動終端進行流媒體實時傳送的系統(tǒng)，其特征在于，包括流媒體服務平臺 和權利要求5-8中任一項所述的移動終端。
【文檔編號】H04N21/24GK104219543SQ201310209955
【公開日】2014年12月17日 申請日期:2013年5月31日 優(yōu)先權日:2013年5月31日
【發(fā)明者】熊春花, 李華峰, 倪冰, 云亮, 蔣紅源 申請人:中國電信股份有限公司