【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及視頻通信,具體地,涉及全景視頻會(huì)議方法及其系統(tǒng)。
技術(shù)介紹
1、vr全景視頻會(huì)議系統(tǒng)可以為用戶提供沉浸式的、360度全景的視頻會(huì)議體驗(yàn),增強(qiáng)用戶在視頻會(huì)議過程中的沉浸感和專注度。
2、當(dāng)前的vr全景視頻會(huì)議系統(tǒng),主要采用采用的視頻編碼方式有三種,第一種是普通的視頻編碼方式,第二種是改進(jìn)的多區(qū)塊編碼方式,第三種是改進(jìn)的多路編碼方式。
3、其中普通的視頻編碼方法會(huì)對(duì)全景視頻各個(gè)區(qū)域進(jìn)行無差別編碼,而用戶在某一特定時(shí)間點(diǎn)只觀看部分區(qū)域場(chǎng)景,另外用戶觀看視頻的時(shí)候,焦點(diǎn)是對(duì)在感興趣區(qū)域,該區(qū)域需要高清晰度,高質(zhì)量,而該區(qū)域以外的部分作為背景,人眼和大腦往往模糊化處理,并不需要高清晰度和高質(zhì)量的視頻,因此無差別的視頻編碼,會(huì)造成數(shù)據(jù)傳輸?shù)臉O大浪費(fèi)。
4、改進(jìn)的多區(qū)塊編碼方式會(huì)對(duì)全景視頻各個(gè)區(qū)域分塊編碼,各塊之間不存在依賴關(guān)系。當(dāng)用戶觀看某一區(qū)域的時(shí)候,只傳輸這些區(qū)域的分塊編碼數(shù)據(jù),對(duì)其他不觀看的區(qū)域不傳輸,可以在一定層度上解決大量不觀看數(shù)據(jù)傳輸浪費(fèi)的問題,但是此方法對(duì)觀看區(qū)域還是提供無差別的清晰度和視頻質(zhì)量,存在部分?jǐn)?shù)據(jù)傳輸浪費(fèi)問題,另外當(dāng)用戶轉(zhuǎn)頭的時(shí)候,觀看區(qū)域發(fā)生變化,需要對(duì)區(qū)域進(jìn)行快速的切換,因?yàn)楦咔逦群透咭曨l質(zhì)量的畫面?zhèn)鬏斞訒r(shí)較大,從而帶了切換滯后的問題,嚴(yán)重視頻觀看效果。
5、改進(jìn)的多路編碼模式是在改進(jìn)多區(qū)塊編碼方式的基礎(chǔ)上,增加一路低分辨率視頻的編碼,同時(shí)編碼、傳輸以及解碼低分辨率和高分辨率碼流,在區(qū)域切換的時(shí)候先切換低分辨率視頻,等高分辨率碼流到達(dá)后,再切換到高
6、全景視頻會(huì)議是實(shí)時(shí)的,對(duì)網(wǎng)絡(luò)延遲、卡頓以及丟包都非常敏感。以上編碼方法和系統(tǒng)在網(wǎng)絡(luò)條件比較差的時(shí)候,用戶體驗(yàn)很差,經(jīng)常出現(xiàn)卡頓,延遲問題,影響交流。另外,全景視頻會(huì)議的參會(huì)者的硬件設(shè)備以及網(wǎng)絡(luò)條件都不相同,其觀看的視頻畫面的分辨率應(yīng)該有所區(qū)分,但現(xiàn)有技術(shù)最多只能提供兩種分辨率的音視頻碼流,自適應(yīng)能力差,不能滿足所有的參會(huì)者不同硬件設(shè)備以及網(wǎng)絡(luò)條件的需求。
技術(shù)實(shí)現(xiàn)思路
1、本專利技術(shù)基于普通參會(huì)終端的基本信息,提供了一種全景視頻會(huì)議方法及其系統(tǒng),可以根據(jù)vr全景視頻會(huì)議參會(huì)終端的需求為參會(huì)終端提供個(gè)性化視頻的展示。
2、第一方面,本專利技術(shù)提供了一種全景視頻終端采集視頻會(huì)議全景畫面并將其分成多個(gè)區(qū)塊;
3、全景視頻終端對(duì)所述多個(gè)區(qū)塊進(jìn)行分層編碼形成多區(qū)塊和多層級(jí)的碼流;
4、全景視頻終端將所述多區(qū)塊和多層級(jí)的碼流發(fā)送給多點(diǎn)會(huì)議控制器;
5、所述多點(diǎn)會(huì)議控制器通過信令接收普通參會(huì)終端當(dāng)前的基礎(chǔ)信息;
6、所述多點(diǎn)會(huì)議控制器根據(jù)所述普通參會(huì)終端當(dāng)前的基礎(chǔ)信息將對(duì)應(yīng)區(qū)塊和層級(jí)的碼流發(fā)送給所述普通參會(huì)終端。
7、第二方面,本專利技術(shù)還提供了一種全景視頻會(huì)議系統(tǒng),其特征在于,所述系統(tǒng)包括采集模塊、編碼模塊、第一發(fā)送模塊、信息接收模塊以及第二發(fā)送模塊,其中:
8、所述采集模塊,用于全景視頻終端采集視頻會(huì)議全景畫面并將其分成多個(gè)區(qū)塊;
9、所述編碼模塊,用于全景視頻終端對(duì)所述多個(gè)區(qū)塊進(jìn)行分層編碼形成多區(qū)塊和多層級(jí)的碼流;
10、所述第一發(fā)送模塊,用于全景視頻終端將所述多區(qū)塊和多層級(jí)的碼流發(fā)送給多點(diǎn)會(huì)議控制器;
11、所述信息接收模塊,用于所述多點(diǎn)會(huì)議控制器通過信令接收普通參會(huì)終端當(dāng)前的基礎(chǔ)信息;
12、所述第二發(fā)送模塊,用于所述多點(diǎn)會(huì)議控制器根據(jù)所述普通參會(huì)終端當(dāng)前的基礎(chǔ)信息將對(duì)應(yīng)區(qū)塊和層級(jí)的碼流發(fā)送給所述普通參會(huì)終端。
13、本專利技術(shù)提供的全景視頻會(huì)議方法及其系統(tǒng)的優(yōu)點(diǎn)在于:第一,根據(jù)會(huì)議的實(shí)際需要對(duì)視頻進(jìn)行編碼,可以減少數(shù)據(jù)的傳輸量,降低對(duì)網(wǎng)絡(luò)帶寬使用需求,節(jié)省帶寬資源;第二,根據(jù)參會(huì)者觀看的區(qū)域?yàn)閰?huì)者提供不同層次的視頻流,用戶切換觀看區(qū)域時(shí),可以降低視頻畫面的延遲性;第三,可以根據(jù)用戶的網(wǎng)絡(luò)狀況以及終端設(shè)備的性能自動(dòng)調(diào)整傳輸視頻流的清晰度,可以減少用戶觀看視頻卡頓的情況,提高參會(huì)者的體驗(yàn)感。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種全景視頻會(huì)議方法,其特征在于,所述方法包括:
2.根據(jù)權(quán)利要求1所述的全景視頻會(huì)議方法,其特征在于,所述全景視頻終端對(duì)所述多個(gè)區(qū)塊進(jìn)行分層編碼形成多區(qū)塊和多層級(jí)的碼流的步驟具體包括:
3.根據(jù)權(quán)利要求2所述的全景視頻會(huì)議方法,其特征在于,所述不同層的編碼會(huì)生成不同層的碼流,其中所述碼流包括基礎(chǔ)層碼流和增強(qiáng)層碼流;
4.根據(jù)權(quán)利要求1-3中的任意一項(xiàng)所述的全景視頻會(huì)議方法,其特征在于,所述多點(diǎn)會(huì)議控制器根據(jù)所述普通參會(huì)終端的基礎(chǔ)信息將對(duì)應(yīng)區(qū)塊和層級(jí)的碼流發(fā)送給所述普通參會(huì)終端的步驟具體包括:
5.根據(jù)權(quán)利要求4所述的全景視頻會(huì)議方法,其特征在于,所述多點(diǎn)會(huì)議控制器根據(jù)所述普通參會(huì)終端的基礎(chǔ)信息計(jì)算其所需視頻碼流的層次的步驟具體包括:
6.一種全景視頻會(huì)議系統(tǒng),其特征在于,所述系統(tǒng)包括全景視頻終端、多點(diǎn)會(huì)議控制器以及普通參會(huì)終端,其中:
7.根據(jù)權(quán)利要求6所述的全景視頻會(huì)議系統(tǒng),其特征在于,所述編碼模塊具體包括:
8.根據(jù)權(quán)利要求7所述的全景視頻會(huì)議系統(tǒng),其特征在于,所述不同層的編碼會(huì)生成不同
9.根據(jù)權(quán)利要求6-8中的任意一項(xiàng)所述的全景視頻會(huì)議系統(tǒng),其特征在于,所述第二發(fā)送模塊具體包括:
10.根據(jù)權(quán)利要求9所述的全景視頻會(huì)議系統(tǒng),其特征在于,所述碼流計(jì)算模塊具體包括:
...【技術(shù)特征摘要】
1.一種全景視頻會(huì)議方法,其特征在于,所述方法包括:
2.根據(jù)權(quán)利要求1所述的全景視頻會(huì)議方法,其特征在于,所述全景視頻終端對(duì)所述多個(gè)區(qū)塊進(jìn)行分層編碼形成多區(qū)塊和多層級(jí)的碼流的步驟具體包括:
3.根據(jù)權(quán)利要求2所述的全景視頻會(huì)議方法,其特征在于,所述不同層的編碼會(huì)生成不同層的碼流,其中所述碼流包括基礎(chǔ)層碼流和增強(qiáng)層碼流;
4.根據(jù)權(quán)利要求1-3中的任意一項(xiàng)所述的全景視頻會(huì)議方法,其特征在于,所述多點(diǎn)會(huì)議控制器根據(jù)所述普通參會(huì)終端的基礎(chǔ)信息將對(duì)應(yīng)區(qū)塊和層級(jí)的碼流發(fā)送給所述普通參會(huì)終端的步驟具體包括:
5.根據(jù)權(quán)利要求4所述的全景視頻會(huì)議方法,其特征在于,所述多點(diǎn)會(huì)議控制器根...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員:白剛,趙興國(guó),
申請(qǐng)(專利權(quán))人:上海賽連信息科技有限公司,
類型:發(fā)明
國(guó)別省市:
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。