虛擬視點(diǎn)圖像/視頻質(zhì)量度量及應(yīng)用
定 價(jià):79.8 元
- 作者:王曉川
- 出版時(shí)間:2024/8/1
- ISBN:9787115599353
- 出 版 社:人民郵電出版社
- 中圖法分類:TN911.73
- 頁(yè)碼:
- 紙張:
- 版次:
- 開(kāi)本:
隨著網(wǎng)絡(luò)傳輸技術(shù)以及移動(dòng)設(shè)備的發(fā)展與進(jìn)步,以基于深度圖像的繪制技術(shù)為核心的3DTV、立體視頻、自由視點(diǎn)視頻、三維場(chǎng)景遠(yuǎn)程繪制等圖形圖像系統(tǒng)逐漸得到廣泛應(yīng)用。這類系統(tǒng)的特點(diǎn)是服務(wù)器端僅傳輸稀疏的參考視點(diǎn)深度圖像,客戶端可以合成任意視點(diǎn)下的圖像,其呈現(xiàn)給用戶的結(jié)果稱為虛擬視點(diǎn)圖像。與傳統(tǒng)圖像失真不同,虛擬視點(diǎn)圖像的失真具有非結(jié)構(gòu)性、局部性的特點(diǎn),因此,需要給出合理的、符合人的主觀認(rèn)知的質(zhì)量度量指標(biāo),并以此來(lái)優(yōu)化參考視點(diǎn)獲取、深度圖像編碼與傳輸、虛擬視點(diǎn)合成等環(huán)境,從而提升系統(tǒng)的服務(wù)質(zhì)量與用戶體驗(yàn)質(zhì)量。本書以虛擬視點(diǎn)圖像質(zhì)量度量方法研究為切入點(diǎn),介紹了作者在虛擬視點(diǎn)圖像無(wú)參考質(zhì)量度量、基于虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用等方面的研究成果,并對(duì)每一研究?jī)?nèi)容,盡量給出相關(guān)重要、里程碑式的方法,以揭示技術(shù)演化的脈絡(luò),便于讀者在了解當(dāng)前研究進(jìn)展的同時(shí)把握未來(lái)的發(fā)展趨勢(shì)。
本書是以虛擬視點(diǎn)圖像質(zhì)量度量方法研究為切入點(diǎn),系統(tǒng)介紹虛擬視點(diǎn)質(zhì)量評(píng)價(jià)與合成的算法和技術(shù)的書籍。
北航虛擬現(xiàn)實(shí)技術(shù)與系統(tǒng)國(guó)家重點(diǎn)實(shí)驗(yàn)室團(tuán)隊(duì)近五年來(lái)的最新研究進(jìn)展,研究?jī)?nèi)容本身運(yùn)用了凸優(yōu)化、數(shù)值求解、深度學(xué)習(xí)、人類視覺(jué)系統(tǒng)等交叉學(xué)科前沿技術(shù)。
本書可以為相關(guān)領(lǐng)域的研究及應(yīng)用提供重要參考,既可以作為高等院校計(jì)算機(jī)相關(guān)專業(yè)教材,也可作為機(jī)器視覺(jué)、虛擬現(xiàn)實(shí)相關(guān)領(lǐng)域從業(yè)人員的參考用書。
博士,北京航空航天大學(xué)虛擬現(xiàn)實(shí)技術(shù)與系統(tǒng)國(guó)家重點(diǎn)實(shí)驗(yàn)室畢業(yè),師從趙沁平院士,F(xiàn)任北京工商大學(xué)計(jì)算機(jī)學(xué)院副教授,從事虛擬視點(diǎn)質(zhì)量評(píng)價(jià)及合成方向的研究。曾參與國(guó)家863課題“面向移動(dòng)終端的輕量級(jí)實(shí)時(shí)逼真三維圖形繪制引擎”,在自由視點(diǎn)視頻、多視點(diǎn)視頻及交互式遠(yuǎn)程繪制方向積累了豐富的研究成果和工程經(jīng)驗(yàn)。
目錄
第1章 緒論1
1.1 虛擬視點(diǎn)圖像的產(chǎn)生及應(yīng)用1
1.1.1 基于深度圖像的繪制技術(shù)1
1.1.2 虛擬視點(diǎn)圖像的應(yīng)用4
1.2 虛擬視點(diǎn)圖像的失真特點(diǎn)6
1.3 虛擬視點(diǎn)圖像質(zhì)量度量的意義10
1.4 本書組織結(jié)構(gòu)11
參考文獻(xiàn)12
第2章 虛擬視點(diǎn)圖像質(zhì)量度量的理論研究現(xiàn)狀15
2.1 圖像質(zhì)量度量方法概述15
2.2 圖像質(zhì)量主觀度量18
2.2.1 圖像質(zhì)量主觀評(píng)測(cè)方法18
2.2.2 圖像質(zhì)量主觀評(píng)分?jǐn)?shù)據(jù)集20
2.3 圖像質(zhì)量客觀度量23
2.3.1 全參考圖像質(zhì)量度量23
2.3.2 部分參考圖像質(zhì)量度量28
2.3.3 無(wú)參考圖像質(zhì)量度量30
2.4 虛擬視點(diǎn)圖像質(zhì)量度量37
2.4.1 傳統(tǒng)圖像質(zhì)量度量方法的遷移37
2.4.2 基于深度的圖像質(zhì)量度量38
參考文獻(xiàn)39
第3章 無(wú)參考虛擬視點(diǎn)圖像/視頻質(zhì)量度量方法46
3.1 基于視覺(jué)權(quán)重圖的無(wú)參考圖像質(zhì)量度量方法46
3.1.1 概述46
3.1.2 視覺(jué)權(quán)重圖的生成方法49
3.1.3 基于視覺(jué)權(quán)重圖的無(wú)參考圖像質(zhì)量度量方法的整體流程58
3.1.4 實(shí)驗(yàn)結(jié)果與分析65
3.2 基于局部顯著度的無(wú)參考虛擬視點(diǎn)圖像質(zhì)量度量方法71
3.2.1 概述71
3.2.2 虛擬視點(diǎn)圖像局部顯著度74
3.2.3 基于CNN的無(wú)參考虛擬視點(diǎn)圖像質(zhì)量度量79
3.2.4 虛擬視點(diǎn)圖像主觀數(shù)據(jù)集的構(gòu)建82
3.2.5 實(shí)驗(yàn)結(jié)果與分析86
3.3 基于多模態(tài)特征聚合的無(wú)參考虛擬視點(diǎn)視頻質(zhì)量度量方法96
3.3.1 概述96
3.3.2 虛擬視點(diǎn)視頻失真分析及特征表示97
3.3.3 基于注意力的多模態(tài)特征聚合107
3.3.4 虛擬視點(diǎn)視頻主觀數(shù)據(jù)集的構(gòu)建109
3.3.5 實(shí)驗(yàn)結(jié)果與分析111
參考文獻(xiàn)119
第4章 虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用123
4.1 基于虛擬視點(diǎn)圖像質(zhì)量度量的參考視點(diǎn)深度圖像傳輸方法123
4.1.1 概述124
4.1.2 基于JND的虛擬視點(diǎn)圖像質(zhì)量度量126
4.1.3 基于視覺(jué)感知的參考視點(diǎn)深度圖像傳輸129
4.1.4 實(shí)驗(yàn)結(jié)果與分析138
4.2 基于視覺(jué)感知的無(wú)監(jiān)督虛擬視點(diǎn)合成方法150
4.2.1 概述150
4.2.2 無(wú)監(jiān)督的虛擬視點(diǎn)合成框架152
4.2.3 基于視覺(jué)感知的損失函數(shù)160
4.2.4 實(shí)驗(yàn)結(jié)果與分析163
參考文獻(xiàn)175
第5章 總結(jié)與展望179
5.1 總結(jié)179
5.1.1 虛擬視點(diǎn)圖像質(zhì)量度量總結(jié)179
5.1.2 虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用總結(jié)180
5.2 展望182