視頻序列中行為識別的研究是當(dāng)前的一個(gè)研究熱點(diǎn),應(yīng)用前景廣闊,在醫(yī)療看護(hù)、視頻監(jiān)控、安保、視頻檢索以及運(yùn)動分析等方面已經(jīng)步入實(shí)用化。但由于視頻本身包含了豐富的信息,且實(shí)際應(yīng)用場景下背景糟雜、視角多變以及行為本身的歧義性,行為識別的研究存在著諸多挑戰(zhàn),需要進(jìn)一步的深入研究。 本文的主要工作圍繞著如何表示視頻中的行為展開,包含三個(gè)方面,一是研究從底層特征中提取中層特征表示問題;二是從行為相似的角度來研究行為的表示;三是從特征的統(tǒng)計(jì)分布出發(fā)研究特征的編碼表示方法。總之,基于手工設(shè)計(jì)的特征,本文從多個(gè)角度來改進(jìn)底層特征的表示能力,進(jìn)而提升分類識別性能
徐勤軍(1975.8~ ),男,山東新泰人,東南大學(xué)信息與通信系統(tǒng)專業(yè)博士,閩南師范大學(xué)講師,主持福建省自然科學(xué)基金(2018J01552),福建省教育廳科研項(xiàng)目(JA15309)各一項(xiàng),研究方向?yàn)橛?jì)算機(jī)視覺,模式識別。
目錄
章緒論................................................................................1
一、研究背景與意義......................................................................1
二、國內(nèi)外研究現(xiàn)狀......................................................................5
(一)行為識別的特征表示.............................................................9
(二)分類識別方法.....................................................................21
三、視頻序列的行為識別建模的技術(shù)難點(diǎn)....................................30
四、行為識別視頻數(shù)據(jù)庫.............................................................33
(一)單人行為數(shù)據(jù)庫..................................................................34
(二)復(fù)雜行為數(shù)據(jù)庫..................................................................35
五、主要工作................................................................................39
六、本書組織結(jié)構(gòu)........................................................................41
第二章概率隱含語義分析模型的行為識別研究.............................43
一、引言.......................................................................................43
二、主題模型在行為識別中的應(yīng)用...............................................45
(一)主題模型............................................................................45
(二)主題模型在行為識別中的應(yīng)用.............................................48
三、評估方法................................................................................50
(一)特征提取和表示..................................................................50
(二)特征編碼與歸一化..............................................................52
(三)PLSA模型設(shè)置....................................................................53
四、實(shí)驗(yàn)結(jié)果與分析.....................................................................54
(一)KTH數(shù)據(jù)庫的實(shí)驗(yàn)結(jié)果........................................................55
(二)UT-interaction數(shù)據(jù)庫的實(shí)驗(yàn)結(jié)果.....................................61
五、結(jié)果分析與討論.....................................................................72
六、本章小結(jié)................................................................................74
第三章行為相似度識別的過完備稀疏方法....................................75
一、引言.......................................................................................75
二、相關(guān)研究................................................................................77
三、基于高斯混合模型的過完備稀疏方法....................................80
(一)特征提取............................................................................81
(二)高斯混合模型.....................................................................82
(三)字典學(xué)習(xí)與稀疏編碼...........................................................84
(四)概率加權(quán)的池化表示...........................................................85
四、實(shí)驗(yàn)結(jié)果與分析.....................................................................87
(一)實(shí)驗(yàn)設(shè)置............................................................................87
(二)參數(shù)選擇............................................................................87
(三)不同特征描述符的性能比較................................................90
(四)與主流算法的性能比較.......................................................92
(五)結(jié)果分析與討論..................................................................93
五、本章小結(jié)................................................................................98
第四章基于費(fèi)舍爾向量和局域聚合描述符向量編碼的行為識別
方法....................................................................................100
一、特征編碼方法......................................................................100
二、費(fèi)舍爾向量和局域聚合描述符向量編碼..............................104
(一)費(fèi)舍爾向量編碼................................................................104
(二)局域聚合描述符向量編碼..................................................106
(三)單詞包、費(fèi)舍爾向量和局域聚合描述符向量編碼的關(guān)系
...................................................................................................107
三、基于軟分配的局域聚合描述符向量編碼..............................108
四、聯(lián)合高階矩的費(fèi)舍爾向量編碼.............................................110
五、實(shí)驗(yàn)結(jié)果與分析...................................................................113
(一)實(shí)驗(yàn)設(shè)置...........................................................................113
(二)主成分分析影響................................................................115
(三)基于軟分配的局域聚合描述符向量編碼的實(shí)驗(yàn)結(jié)果............116
(四)聯(lián)合高階矩的費(fèi)舍爾向量方法的實(shí)驗(yàn)結(jié)果..........................119
(五)結(jié)果分析與討論................................................................124
六、本章小結(jié)..............................................................................126
第五章基于時(shí)空信息的超向量編碼行為識別方法.......................127
一、引言.....................................................................................127
二、基于時(shí)空信息的超向量編碼方法.........................................130
三、實(shí)驗(yàn)結(jié)果與分析...................................................................133
(一)KTH數(shù)據(jù)庫上的實(shí)驗(yàn)結(jié)果...................................................135
(二)UCFsports數(shù)據(jù)庫上的實(shí)驗(yàn)結(jié)果.......................................137
(三)UCF101數(shù)據(jù)庫上的實(shí)驗(yàn)結(jié)果..............................................139
(四)實(shí)驗(yàn)結(jié)果分析....................................................................143
四、本章小結(jié)..............................................................................149
第六章總結(jié)與展望.........................................................................150
一、總結(jié).....................................................................................150
二、展望.....................................................................................152
參加的科研項(xiàng)目和獲得的獎(jiǎng)勵(lì).........................................................154
參考文獻(xiàn)155