本發(fā)明專利技術(shù)公開了確定人體動作周期及識別人體動作的方法和裝置。所述確定視頻中人體動作周期的方法包括:在預(yù)定的搜索范圍內(nèi)搜索人體姿態(tài)與當(dāng)前幀相似的幀;如果在搜索范圍內(nèi)搜索到人體姿態(tài)與當(dāng)前幀相似的幀,則將當(dāng)前幀與所述人體姿態(tài)與當(dāng)前幀相似的幀之間的時長作為視頻中的人體動作周期。通過針對不同行為、不同個體來確定相應(yīng)的人體動作周期,可以更為準(zhǔn)確地提取時空特征,并實(shí)現(xiàn)更為準(zhǔn)確的人體行為識別。
【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)總體上涉及計(jì)算機(jī)領(lǐng)域,具體來說,涉及人體行為的計(jì)算機(jī)識別,更具體來說,涉及一種確定視頻中人體動作周期的方法和裝置以及一種識別視頻中人體動作的方法和裝置。
技術(shù)介紹
人體行為識別技術(shù)具有廣泛的應(yīng)用前景并且得到越來越多的關(guān)注。利用該技術(shù)可以從視頻中快速地檢測出人們關(guān)注的行為。人體行為識別技術(shù)可被應(yīng)用到視頻監(jiān)控(銀行、醫(yī)院、工廠等環(huán)境)、人機(jī)交互(虛擬游戲等場景)、體育自動解說等領(lǐng)域。 針對人體行為識別技術(shù),目前已經(jīng)提出了多種實(shí)現(xiàn)方法,其中基于時空特征的實(shí)現(xiàn)方法是一種流行且有效的方法。在這類方法中,通過時空特征來描述當(dāng)前幀以及相鄰數(shù)幀的信息,而后利用時空特征實(shí)現(xiàn)人體行為識別。在提取時空特征的處理中,對所有運(yùn)動視頻,設(shè)定相同長度的人體動作周期。然而,由于不同行為、不同個體存在差異性,為了進(jìn)一步提高利用時空特征實(shí)現(xiàn)的人體行為識別的準(zhǔn)確性,希望可以針對不同行為、不同個體來確定相應(yīng)的人體動作周期以便提取時空特征,進(jìn)而實(shí)現(xiàn)更為準(zhǔn)確的人體行為識別。
技術(shù)實(shí)現(xiàn)思路
在下文中給出了關(guān)于本專利技術(shù)的簡要概述,以便提供關(guān)于本專利技術(shù)的某些方面的基本理解。應(yīng)當(dāng)理解,這個概述并不是關(guān)于本專利技術(shù)的窮舉性概述。它并不是意圖確定本專利技術(shù)的關(guān)鍵或重要部分,也不是意圖限定本專利技術(shù)的范圍。其目的僅僅是以簡化的形式給出某些概念,以此作為稍后論述的更詳細(xì)描述的前序。本專利技術(shù)旨在提供一種確定視頻中人體動作周期的方法和裝置以及相應(yīng)的確定視頻中人體動作的方法和裝置,其可以針對不同行為、不同個體來確定相應(yīng)的人體動作周期,由此可以更為準(zhǔn)確地提取時空特征,并進(jìn)而實(shí)現(xiàn)更為準(zhǔn)確的人體行為識別。為了實(shí)現(xiàn)上述目的,根據(jù)本專利技術(shù)的一個方面,提供了一種確定視頻中人體動作周期的方法,包括在搜索范圍內(nèi)搜索人體姿態(tài)與當(dāng)前幀相似的幀;如果在搜索范圍內(nèi)搜索到所述人體姿態(tài)與當(dāng)前幀相似的幀,則將當(dāng)前幀與所述人體姿態(tài)與當(dāng)前幀相似的幀之間的時長作為視頻中的人體動作周期;否則,則將第一時長作為人體動作周期。根據(jù)本專利技術(shù)的另一個方面,提供了一種識別視頻中人體動作的方法,包括根據(jù)上述確定視頻中人體動作周期的方法來確定視頻中的人體動作的周期;基于確定出的周期來提取時空特征以確定視頻中的人體動作。根據(jù)本專利技術(shù)的另一個方面,還提供了一種確定視頻中人體動作周期的裝置,包括搜索部,被配置成在搜索范圍內(nèi)搜索人體姿態(tài)與當(dāng)前幀相似的幀;周期確定部,被配置成如果所述搜索部在搜索范圍內(nèi)搜索到所述人體姿態(tài)與當(dāng)前幀相似的幀,則將當(dāng)前幀與所述人體姿態(tài)與當(dāng)前幀相似的幀之間的時長作為視頻中的人體動作周期。根據(jù)本專利技術(shù)的另一個方面,還提供了一種識別視頻中人體動作的裝置,包括包括上述確定視頻中人體動作周期的裝置的人體動作周期確定部,被配置成確定視頻中的人體動作的周期;識別部,被配置成基于確定出的周期來提取時空特征以識別視頻中的人體動作。依據(jù)本專利技術(shù)的其它方面,還提供了相應(yīng)的計(jì)算機(jī)程序代碼、計(jì)算機(jī)可讀存儲介質(zhì)和計(jì)算機(jī)程序產(chǎn)品。通過以下結(jié)合附圖對本專利技術(shù)的最佳實(shí)施例的詳細(xì)說明,本專利技術(shù)的這些以及其他優(yōu)點(diǎn)將更加明顯。附圖說明 本專利技術(shù)可以通過參考下文中結(jié)合附圖所給出的描述而得到更好的理解,其中在所有附圖中使用了相同或相似的附圖標(biāo)記來表示相同或者相似的部件。所述附圖連同下面的詳細(xì)說明一起包含在本說明書中并且形成本說明書的一部分,而且用來進(jìn)一步舉例說明本專利技術(shù)的優(yōu)選實(shí)施例和解釋本專利技術(shù)的原理和優(yōu)點(diǎn)。在附圖中圖I示出了根據(jù)本專利技術(shù)一個實(shí)施例的確定視頻中人體動作周期的方法的流程圖;圖2示出了根據(jù)本專利技術(shù)的一個實(shí)施例的搜索人體姿態(tài)與當(dāng)前幀相似的幀的處理的流程圖;圖3示出了根據(jù)本專利技術(shù)一個實(shí)施例的計(jì)算搜索范圍內(nèi)的每一幀中人體區(qū)域的面積的處理的流程圖;圖4示出了根據(jù)本專利技術(shù)另一個實(shí)施例的計(jì)算搜索范圍內(nèi)的每一幀中人體區(qū)域的面積的處理的流程圖;圖5示出了根據(jù)本專利技術(shù)一個實(shí)施例的計(jì)算運(yùn)動直方圖的處理的流程圖;圖6示出了根據(jù)本專利技術(shù)另一個實(shí)施例的計(jì)算運(yùn)動直方圖的處理的流程圖;圖7示出了根據(jù)本專利技術(shù)一個實(shí)施例的根據(jù)運(yùn)動直方圖和人體區(qū)域面積來搜索人體姿態(tài)與當(dāng)前幀相似的幀的處理的流程圖;圖8示出了根據(jù)本專利技術(shù)一個實(shí)施例的識別視頻中人體動作的方法的流程圖;圖9示出了根據(jù)本專利技術(shù)一個實(shí)施例的確定視頻中人體動作周期的裝置的示意圖;圖10示出了根據(jù)本專利技術(shù)一個實(shí)施例的搜索部的示意圖;圖11示出了根據(jù)本專利技術(shù)一個實(shí)施例的面積計(jì)算部的示意圖;圖12示出了根據(jù)本專利技術(shù)另一個實(shí)施例的面積計(jì)算部的示意圖;圖13示出了根據(jù)本專利技術(shù)一個實(shí)施例的運(yùn)動直方圖計(jì)算部的示意圖;圖14示出了根據(jù)本專利技術(shù)另一個實(shí)施例的運(yùn)動直方圖計(jì)算部的示意圖;圖15示出了根據(jù)本專利技術(shù)一個實(shí)施例的幀搜索部的示意圖;圖16示出根據(jù)本專利技術(shù)一個實(shí)施例的識別視頻中人體動作的裝置的示意圖;以及圖17是示出了其中可以實(shí)現(xiàn)根據(jù)本專利技術(shù)實(shí)施例的方法和/或裝置的通用個人計(jì)算機(jī)的示例性結(jié)構(gòu)的方框圖。具體實(shí)施例方式在下文中將結(jié)合附圖對本專利技術(shù)的示范性實(shí)施例進(jìn)行描述。為了清楚和簡明起見,在說明書中并未描述實(shí)際實(shí)施方式的所有特征。然而,應(yīng)該了解,在開發(fā)任何這種實(shí)際實(shí)施例的過程中必須做出很多特定于實(shí)施方式的決定,以便實(shí)現(xiàn)開發(fā)人員的具體目標(biāo),例如,符合與系統(tǒng)及業(yè)務(wù)相關(guān)的那些限制條件,并且這些限制條件可能會隨著實(shí)施方式的不同而有所改變。此外,還應(yīng)該了解,雖然開發(fā)工作有可能是非常復(fù)雜和費(fèi)時的,但對得益于本公開內(nèi)容的本領(lǐng)域技術(shù)人員來說,這種開發(fā)工作僅僅是例行的任務(wù)。在此,還需要說明的一點(diǎn)是,為了避免因不必要的細(xì)節(jié)而模糊了本專利技術(shù),在附圖中僅僅示出了與根據(jù)本專利技術(shù)的方案密切相關(guān)的裝置結(jié)構(gòu)和/或處理步驟,而省略了與本專利技術(shù)關(guān)系不大的其他細(xì)節(jié)。圖I示出了根據(jù)本專利技術(shù)一個實(shí)施例的確定視頻中人體動作周期的方法的流程圖。如圖I所示,在步驟S102處,搜索人體姿態(tài)與當(dāng)前幀相似的幀。考慮到人體動作往往具有周期性,當(dāng)動作周期結(jié)束時,人體可以回到動作開始的姿態(tài)。因而,可以通過搜索人體姿態(tài)與當(dāng)前幀相似的幀來確定一個完整的人體動作的周期。 接著,在步驟S104處,可以按照搜索結(jié)果來判斷搜索范圍內(nèi)是否存在人體姿態(tài)與當(dāng)前幀相似的幀。如果搜索結(jié)果表明搜索到所述人體姿態(tài)與當(dāng)前幀相似的幀,則在步驟S106處,將當(dāng)前幀與所述人體姿態(tài)與當(dāng)前幀相似的幀之間的時長作為視頻中的人體動作周期。如果搜索結(jié)果表明在搜索范圍內(nèi)沒有搜索到所述人體姿態(tài)與當(dāng)前幀相似的幀,則在步驟S108處,可以將預(yù)定的第一時長作為人體動作周期。其中,所述第一時長是足以包括一個完整的人體動作的時間長度,可以根據(jù)經(jīng)驗(yàn)值或根據(jù)不同的應(yīng)用場景來合理地設(shè)置所述第一時長。通過合理地設(shè)置所述第一時長,可以避免在搜索范圍內(nèi)不存在人體姿態(tài)與當(dāng)前幀相似的幀的情況下的反復(fù)搜索,由此可以減少計(jì)算量,提高效率。圖I所示實(shí)施例的方法可以基于人體動作的周期性來確定人體動作周期。因而,可以準(zhǔn)確地檢測出視頻中人體動作的周期。在上述確定視頻中人體動作周期的方法中,根據(jù)不同的應(yīng)用場景或根據(jù)不同的需要可以設(shè)置不同的搜索范圍來搜索人體姿態(tài)與當(dāng)前幀相似的幀。在本專利技術(shù)的一個實(shí)施例中,所述搜索范圍可以是以當(dāng)前幀為起點(diǎn)向后經(jīng)過預(yù)定第二時長的時段。其中,所述第二時長可以是足以包括一個人體動作的時間長度,可以根據(jù)經(jīng)驗(yàn)值或根據(jù)具體應(yīng)用場景來合理地設(shè)置所述第二時長。所述第二時長可以和上述的第一時長相同,也可以和所述第一時長不同。以上描本文檔來自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
一種確定視頻中人體動作周期的方法,包括:在搜索范圍內(nèi)搜索人體姿態(tài)與當(dāng)前幀相似的幀;在搜索到所述人體姿態(tài)與當(dāng)前幀相似的幀的情況下,將當(dāng)前幀與所述人體姿態(tài)與當(dāng)前幀相似的幀之間的時長作為視頻中的人體動作周期。
【技術(shù)特征摘要】
【專利技術(shù)屬性】
技術(shù)研發(fā)人員:王月紅,劉汝杰,李斐,遠(yuǎn)藤進(jìn),上原祐介,
申請(專利權(quán))人:富士通株式會社,
類型:發(fā)明
國別省市:
還沒有人留言評論。發(fā)表了對其他瀏覽者有用的留言會獲得科技券。