一種音視頻綜合處理系統(tǒng)及方法技術(shù)方案

本發(fā)明專利技術(shù)涉及一種音視頻綜合處理系統(tǒng)及方法，該系統(tǒng)包括：視頻監(jiān)視模塊，監(jiān)視采集的視頻信號；音頻監(jiān)聽模塊，監(jiān)聽采集的音頻信號；視頻編輯模塊，對多路視頻信號實時進(jìn)行編輯，形成目標(biāo)畫面；視頻編碼模塊，是對編輯后的畫面進(jìn)行實時編碼(H264)供后序錄像或直播；音頻編碼模塊，對音頻信號分別進(jìn)行AAC編碼和G711編碼，分別提供給錄像和直播；第一音視頻同步模塊為錄像專用；第二音視頻同步模塊為直播專用，錄像模塊，是對同步后音(AAC)視(H264)頻實時寫入PM4文件，直播模塊采用私有協(xié)議在一定范圍內(nèi)實時網(wǎng)上直播。本發(fā)明專利技術(shù)的技術(shù)方案，以軟件方法實現(xiàn)音視頻的采集、編輯、編碼、錄像和網(wǎng)上直播功能，功能集成度高，更新升級維護(hù)成本低，應(yīng)用范圍更廣。

【技術(shù)實現(xiàn)步驟摘要】
一種音視頻綜合處理系統(tǒng)及方法
本專利技術(shù)涉及音視頻處理
，具體涉及一種音視頻綜合處理系統(tǒng)及方法。
技術(shù)介紹
錄像是指用光學(xué)、電磁等方法把圖像記錄下來，也指記錄下來的圖像。廣播電視詞典對直播界定為"廣播電視節(jié)目的后期(haobc)合成、播出同時進(jìn)行的播出方式"。按播出場合可分為現(xiàn)場直播和播音室或演播室直播等形式。電視現(xiàn)場直播為在現(xiàn)場隨著事件的發(fā)生、發(fā)展進(jìn)程同時制作和播出電視節(jié)目的播出方式，是充分體現(xiàn)廣播電視媒介傳播優(yōu)勢的播出方式。目前，網(wǎng)絡(luò)媒體自身還沒準(zhǔn)確抽象概括出網(wǎng)絡(luò)直播的界定，為方便起見，不妨參照傳播學(xué)及電視現(xiàn)場直播的概念給網(wǎng)絡(luò)直播下個簡單的定義：在現(xiàn)場隨著事件的發(fā)生、發(fā)展進(jìn)程同步制作和發(fā)布信息，具有雙向流通過程的信息網(wǎng)絡(luò)發(fā)布方式。其形式也可分為現(xiàn)場直播、演播室訪談式直播、文字圖片直播、視音頻直播或由電視(第三方)提供信源的直播；而且具備海量存儲，查尋便捷的功能。現(xiàn)有技術(shù)中，高清(720p/1080p)錄像和直播都是通過硬件實現(xiàn)的，例如：利用攝像機(jī)采集視頻源的視頻信號，利用話筒采集音頻源的音頻信號，利用視頻監(jiān)視器對攝像機(jī)采集的視頻信號進(jìn)行播放顯示，利用音頻監(jiān)聽器對話筒采集的音頻信號進(jìn)行播放收聽，利用視頻編碼器對視頻信號進(jìn)行編碼，利用音頻編碼器對音頻信號進(jìn)行編碼，利用音視頻同步模塊對音頻信號和視頻信號進(jìn)行同步等，上述提及的視頻監(jiān)視器、音頻監(jiān)聽器、視頻編碼器、音頻編碼器等在現(xiàn)有技術(shù)中都是有對應(yīng)的硬件設(shè)備存在的，用戶需要錄像和直播時，需要將這些硬件設(shè)備搭建起來，然后進(jìn)行錄像和直播。現(xiàn)有技術(shù)中，這種采用硬件設(shè)備進(jìn)行錄像和直播的缺點在于：1、設(shè)備占用空間面積大，對使用環(huán)境有要求。2、由于設(shè)備多，耗電大，不夠節(jié)能。3、設(shè)備硬件更新升級時，有時候由于硬件兼容問題，需要進(jìn)行整體替換，使用成本高。4、設(shè)備硬件維護(hù)成本高，搬運不便，使得應(yīng)用范圍受限。
技術(shù)實現(xiàn)思路
有鑒于此，本專利技術(shù)的目的在于克服現(xiàn)有技術(shù)的不足，提供一種音視頻綜合處理系統(tǒng)及方法，以軟件方法實現(xiàn)音視頻的采集、編輯、編碼、錄像和網(wǎng)上直播功能。為實現(xiàn)以上目的，本專利技術(shù)采用如下技術(shù)方案：一種音視頻綜合處理系統(tǒng)，包括：視頻監(jiān)視模塊，用于監(jiān)視采集到的多路視頻信號；音頻監(jiān)聽模塊，用于監(jiān)聽采集到的多路音頻信號；視頻編輯模塊，用于對所監(jiān)視的多路視頻信號進(jìn)行實時編輯，以形成目標(biāo)畫面；視頻編碼模塊，用于對編輯后的目標(biāo)畫面進(jìn)行實時H264視頻編碼，以供后續(xù)錄像或者直播使用；音頻編碼模塊，用于對所監(jiān)聽的音頻信號分別進(jìn)行AAC高保真編碼和低碼流G711編碼；第一音視頻同步模塊，用于同步H264視頻編碼信號和AAC高保真編碼后的音頻信號，得到同步后的錄像音視頻流；第二音視頻同步模塊，用于同步H264視頻編碼信號和低碼流G711編碼后的音頻信號，得到同步后的直播音視頻流；錄像模塊，用于將同步后的錄像音視頻流實時寫入到PM4文件；直播模塊，用于采用預(yù)設(shè)協(xié)議將同步后的直播音視頻流在預(yù)設(shè)范圍內(nèi)進(jìn)行實時網(wǎng)上直播。優(yōu)選地，所述多路視頻信號通過網(wǎng)絡(luò)數(shù)字?jǐn)z像機(jī)進(jìn)行采集。優(yōu)選地，所述多路音頻信號通過話筒和帶聲卡的電腦采集，或者通過話筒和網(wǎng)絡(luò)數(shù)字?jǐn)z像機(jī)采集。優(yōu)選地，所述視頻編輯模塊基于匯編語言實現(xiàn)。優(yōu)選地，所述視頻編碼模塊基于FFMPEG編碼庫來實現(xiàn)的。優(yōu)選地，所述視頻編碼模塊上設(shè)有多個控制接口，包括：碼流控制接口、質(zhì)量控制接口、延時控制接口和分辨率控制接口。優(yōu)選地，所述視頻編碼模塊的入口為I420數(shù)據(jù)流格式，出口數(shù)據(jù)為H264數(shù)據(jù)流格式。優(yōu)選地，所述第一音視頻同步模塊，以AAC高保真編碼后的音頻信號為基準(zhǔn)，同時采用固定幀率算法、時基同步算法對H264視頻編碼信號進(jìn)行插幀、丟幀，確保音視頻同步，得到同步后的錄像音視頻流。優(yōu)選地，所述第二音視頻同步模塊，以低碼流G711編碼后的音頻信號為基準(zhǔn)，同時采用固定幀率算法、時基同步算法對H264視頻編碼信號進(jìn)行插幀、丟幀，確保音視頻同步，得到同步后的直播音視頻流。一種音視頻綜合處理方法，應(yīng)用于上述的音視頻綜合處理系統(tǒng)中，包括：步驟S1、監(jiān)視采集到的視頻信號，同時監(jiān)聽采集到的音頻信號；步驟S2、對所監(jiān)視的多路視頻信號進(jìn)行實時編輯，以形成目標(biāo)畫面；步驟S3、對編輯后的目標(biāo)畫面進(jìn)行實時H264視頻編碼，以供后續(xù)錄像或者直播使用；步驟S4、對所監(jiān)聽的音頻信號分別進(jìn)行AAC高保真編碼和低碼流G711編碼；步驟S5、同步H264視頻編碼信號和AAC高保真編碼后的音頻信號，得到同步后的錄像音視頻流；步驟S6、同步H264視頻編碼信號和低碼流G711編碼后的音頻信號，得到同步后的直播音視頻流；步驟S7、將同步后的錄像音視頻流實時寫入到PM4文件；步驟S8、采用預(yù)設(shè)協(xié)議將同步后的直播音視頻流在預(yù)設(shè)范圍內(nèi)進(jìn)行實時網(wǎng)上直播。本專利技術(shù)采用以上技術(shù)方案，至少具備以下有益效果：可以理解的是，本專利技術(shù)提供的這種音視頻綜合處理系統(tǒng)及方法，視頻監(jiān)視模塊、音頻監(jiān)聽模塊、視頻編輯模塊、視頻編碼模塊、音頻編碼模塊、第一音視頻同步模塊和第二音視頻同步模塊皆由軟件編碼實現(xiàn)，相比現(xiàn)有技術(shù)中，通過硬件實現(xiàn)音視頻錄像和直播的技術(shù)方案，本專利技術(shù)提供的技術(shù)方案，成本低、部署方便，應(yīng)用范圍更廣，且后期維護(hù)升級成本低、操作簡單。另外，本專利技術(shù)提供的這種音視頻綜合處理系統(tǒng)及方法，由于集成了錄像和直播功能，所以可以同時進(jìn)行錄像轉(zhuǎn)播和直播，無需分別安裝不同的軟件系統(tǒng)，功能集成度更高，客戶體驗度高。附圖說明為了更清楚地說明本專利技術(shù)實施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本專利技術(shù)的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。圖1為本專利技術(shù)一實施例提供的一種音視頻綜合處理系統(tǒng)的示意框圖；圖2為本專利技術(shù)一實施例提供的一種音視頻綜合處理方法的流程示意圖。具體實施方式為使本專利技術(shù)的目的、技術(shù)方案和優(yōu)點更加清楚，下面將對本專利技術(shù)的技術(shù)方案進(jìn)行詳細(xì)的描述。顯然，所描述的實施例僅僅是本專利技術(shù)一部分實施例，而不是全部的實施例。基于本專利技術(shù)中的實施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動的前提下所得到的所有其它實施方式，都屬于本專利技術(shù)所保護(hù)的范圍。下面通過附圖和實施例，對本專利技術(shù)的技術(shù)方案做進(jìn)一步的詳細(xì)描述。參見圖1，本專利技術(shù)一實施例提供的一種音視頻綜合處理系統(tǒng)，包括：視頻監(jiān)視模塊1，用于監(jiān)視采集到的多路視頻信號；音頻監(jiān)聽模塊2，用于監(jiān)聽采集到的多路音頻信號；視頻編輯模塊3，用于對所監(jiān)視的多路視頻信號進(jìn)行實時編輯，以形成目標(biāo)畫面；視頻編碼模塊4，用于對編輯后的目標(biāo)畫面進(jìn)行實時H264視頻編碼，以供后續(xù)錄像或者直播使用；音頻編碼模塊5，用于對所監(jiān)聽的音頻信號分別進(jìn)行AAC高保真編碼和低碼流G711編碼；第一音視頻同步模塊6，用于同步H264視頻編碼信號和AAC高保真編碼后的音頻信號，得到同步后的錄像音視頻流；第二音視頻同步模塊7，用于同步H264視頻編碼信號和低碼流G711編碼后的音頻信號，得到同步后的直播音視頻流；錄像模塊8，用于將同步后的錄像音視頻流實時寫入到PM4文件；直播模塊9，用于采用預(yù)設(shè)協(xié)議將同步后的直播音視頻流在預(yù)設(shè)范圍內(nèi)進(jìn)行實時網(wǎng)上直播。需要說明的是：1、視頻監(jiān)視模塊，此模塊相當(dāng)于四路硬件編輯機(jī)的監(jiān)視部分，比硬件本文檔來自技高網(wǎng)...

【技術(shù)保護(hù)點】
一種音視頻綜合處理系統(tǒng)，其特征在于，包括：視頻監(jiān)視模塊，用于監(jiān)視采集到的多路視頻信號；音頻監(jiān)聽模塊，用于監(jiān)聽采集到的多路音頻信號；視頻編輯模塊，用于對所監(jiān)視的多路視頻信號進(jìn)行實時編輯，以形成目標(biāo)畫面；視頻編碼模塊，用于對編輯后的目標(biāo)畫面進(jìn)行實時H264視頻編碼，以供后續(xù)錄像或者直播使用；音頻編碼模塊，用于對所監(jiān)聽的音頻信號分別進(jìn)行AAC高保真編碼和低碼流G711編碼；第一音視頻同步模塊，用于同步H264視頻編碼信號和AAC高保真編碼后的音頻信號，得到同步后的錄像音視頻流；第二音視頻同步模塊，用于同步H264視頻編碼信號和低碼流G711編碼后的音頻信號，得到同步后的直播音視頻流；錄像模塊，用于將同步后的錄像音視頻流實時寫入到PM4文件；直播模塊，用于采用預(yù)設(shè)協(xié)議將同步后的直播音視頻流在預(yù)設(shè)范圍內(nèi)進(jìn)行實時網(wǎng)上直播。

【技術(shù)特征摘要】
1.一種音視頻綜合處理系統(tǒng)，其特征在于，包括：視頻監(jiān)視模塊，用于監(jiān)視采集到的多路視頻信號；音頻監(jiān)聽模塊，用于監(jiān)聽采集到的多路音頻信號；視頻編輯模塊，用于對所監(jiān)視的多路視頻信號進(jìn)行實時編輯，以形成目標(biāo)畫面；視頻編碼模塊，用于對編輯后的目標(biāo)畫面進(jìn)行實時H264視頻編碼，以供后續(xù)錄像或者直播使用；音頻編碼模塊，用于對所監(jiān)聽的音頻信號分別進(jìn)行AAC高保真編碼和低碼流G711編碼；第一音視頻同步模塊，用于同步H264視頻編碼信號和AAC高保真編碼后的音頻信號，得到同步后的錄像音視頻流；第二音視頻同步模塊，用于同步H264視頻編碼信號和低碼流G711編碼后的音頻信號，得到同步后的直播音視頻流；錄像模塊，用于將同步后的錄像音視頻流實時寫入到PM4文件；直播模塊，用于采用預(yù)設(shè)協(xié)議將同步后的直播音視頻流在預(yù)設(shè)范圍內(nèi)進(jìn)行實時網(wǎng)上直播。2.根據(jù)權(quán)利要求1所述的音視頻綜合處理系統(tǒng)，其特征在于，所述多路視頻信號通過網(wǎng)絡(luò)數(shù)字?jǐn)z像機(jī)進(jìn)行采集。3.根據(jù)權(quán)利要求2所述的音視頻綜合處理系統(tǒng)，其特征在于，所述多路音頻信號通過話筒和帶聲卡的電腦采集，或者通過話筒和網(wǎng)絡(luò)數(shù)字?jǐn)z像機(jī)采集。4.根據(jù)權(quán)利要求1所述的音視頻綜合處理系統(tǒng)，其特征在于，所述視頻編輯模塊基于匯編語言實現(xiàn)。5.根據(jù)權(quán)利要求1所述的音視頻綜合處理系統(tǒng)，其特征在于，所述視頻編碼模塊基于FFMPEG編碼庫來實現(xiàn)的。6.根據(jù)權(quán)利要求5所述的音視頻綜合處理系統(tǒng)，其特征在于，所述視頻編碼模塊上設(shè)有多個控制接口，包括：碼流控制接口、質(zhì)量控制接口、延時控制接口和分辨...

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：王建民，
申請(專利權(quán))人：王建民，
類型：發(fā)明
國別省市：江蘇,32