123,123,123

內(nèi)容簡(jiǎn)介

　　隨著網(wǎng)絡(luò)傳輸技術(shù)以及移動(dòng)設(shè)備的發(fā)展與進(jìn)步，以基于深度圖像的繪制技術(shù)為核心的3DTV、立體視頻、自由視點(diǎn)視頻、三維場(chǎng)景遠(yuǎn)程繪制等圖形圖像系統(tǒng)逐漸得到廣泛應(yīng)用。這類系統(tǒng)的特點(diǎn)是服務(wù)器端僅傳輸稀疏的參考視點(diǎn)深度圖像，客戶端可以合成任意視點(diǎn)下的圖像，其呈現(xiàn)給用戶的結(jié)果稱為虛擬視點(diǎn)圖像。與傳統(tǒng)圖像失真不同，虛擬視點(diǎn)圖像的失真具有非結(jié)構(gòu)性、局部性的特點(diǎn)，因此，需要給出合理的、符合人的主觀認(rèn)知的質(zhì)量度量指標(biāo)，并以此來(lái)優(yōu)化參考視點(diǎn)獲取、深度圖像編碼與傳輸、虛擬視點(diǎn)合成等環(huán)境，從而提升系統(tǒng)的服務(wù)質(zhì)量與用戶體驗(yàn)質(zhì)量。本書(shū)以虛擬視點(diǎn)圖像質(zhì)量度量方法研究為切入點(diǎn)，介紹了作者在虛擬視點(diǎn)圖像無(wú)參考質(zhì)量度量、基于虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用等方面的研究成果，并對(duì)每一研究?jī)?nèi)容，盡量給出相關(guān)重要、里程碑式的方法，以揭示技術(shù)演化的脈絡(luò)，便于讀者在了解當(dāng)前研究進(jìn)展的同時(shí)把握未來(lái)的發(fā)展趨勢(shì)。

作者簡(jiǎn)介

　　博士，北京航空航天大學(xué)虛擬現(xiàn)實(shí)技術(shù)與系統(tǒng)國(guó)家重點(diǎn)實(shí)驗(yàn)室畢業(yè)，師從趙沁平院士?，F(xiàn)任北京工商大學(xué)計(jì)算機(jī)學(xué)院副教授，從事虛擬視點(diǎn)質(zhì)量評(píng)價(jià)及合成方向的研究。曾參與國(guó)家863課題“面向移動(dòng)終端的輕量級(jí)實(shí)時(shí)逼真三維圖形繪制引擎”，在自由視點(diǎn)視頻、多視點(diǎn)視頻及交互式遠(yuǎn)程繪制方向積累了豐富的研究成果和工程經(jīng)驗(yàn)。

圖書(shū)目錄

目錄

第1章緒論 1
1.1　虛擬視點(diǎn)圖像的產(chǎn)生及應(yīng)用 1
1.1.1　基于深度圖像的繪制技術(shù) 1
1.1.2　虛擬視點(diǎn)圖像的應(yīng)用 4
1.2　虛擬視點(diǎn)圖像的失真特點(diǎn) 6
1.3　虛擬視點(diǎn)圖像質(zhì)量度量的意義 10
1.4　本書(shū)組織結(jié)構(gòu) 11
參考文獻(xiàn) 12
第2章　虛擬視點(diǎn)圖像質(zhì)量度量的理論研究現(xiàn)狀 15
2.1　圖像質(zhì)量度量方法概述 15
2.2　圖像質(zhì)量主觀度量 18
2.2.1　圖像質(zhì)量主觀評(píng)測(cè)方法 18
2.2.2　圖像質(zhì)量主觀評(píng)分?jǐn)?shù)據(jù)集 20
2.3　圖像質(zhì)量客觀度量 23
2.3.1　全參考圖像質(zhì)量度量 23
2.3.2　部分參考圖像質(zhì)量度量 28
2.3.3　無(wú)參考圖像質(zhì)量度量 30
2.4　虛擬視點(diǎn)圖像質(zhì)量度量 37
2.4.1　傳統(tǒng)圖像質(zhì)量度量方法的遷移 37
2.4.2　基于深度的圖像質(zhì)量度量 38
參考文獻(xiàn) 39
第3章　無(wú)參考虛擬視點(diǎn)圖像/視頻質(zhì)量度量方法 46
3.1　基于視覺(jué)權(quán)重圖的無(wú)參考圖像質(zhì)量度量方法 46
3.1.1　概述 46
3.1.2　視覺(jué)權(quán)重圖的生成方法 49
3.1.3　基于視覺(jué)權(quán)重圖的無(wú)參考圖像質(zhì)量度量方法的整體流程 58
3.1.4　實(shí)驗(yàn)結(jié)果與分析 65
3.2　基于局部顯著度的無(wú)參考虛擬視點(diǎn)圖像質(zhì)量度量方法 71
3.2.1　概述 71
3.2.2　虛擬視點(diǎn)圖像局部顯著度 74
3.2.3　基于CNN的無(wú)參考虛擬視點(diǎn)圖像質(zhì)量度量 79
3.2.4　虛擬視點(diǎn)圖像主觀數(shù)據(jù)集的構(gòu)建 82
3.2.5　實(shí)驗(yàn)結(jié)果與分析 86
3.3　基于多模態(tài)特征聚合的無(wú)參考虛擬視點(diǎn)視頻質(zhì)量度量方法 96
3.3.1　概述 96
3.3.2　虛擬視點(diǎn)視頻失真分析及特征表示 97
3.3.3　基于注意力的多模態(tài)特征聚合 107
3.3.4　虛擬視點(diǎn)視頻主觀數(shù)據(jù)集的構(gòu)建 109
3.3.5　實(shí)驗(yàn)結(jié)果與分析 111
參考文獻(xiàn) 119
第4章虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用 123
4.1　基于虛擬視點(diǎn)圖像質(zhì)量度量的參考視點(diǎn)深度圖像傳輸方法 123
4.1.1　概述 124
4.1.2　基于JND的虛擬視點(diǎn)圖像質(zhì)量度量 126
4.1.3　基于視覺(jué)感知的參考視點(diǎn)深度圖像傳輸 129
4.1.4　實(shí)驗(yàn)結(jié)果與分析 138
4.2　基于視覺(jué)感知的無(wú)監(jiān)督虛擬視點(diǎn)合成方法 150
4.2.1　概述 150
4.2.2　無(wú)監(jiān)督的虛擬視點(diǎn)合成框架 152
4.2.3　基于視覺(jué)感知的損失函數(shù) 160
4.2.4　實(shí)驗(yàn)結(jié)果與分析 163
參考文獻(xiàn) 175

第5章　總結(jié)與展望 179
5.1　總結(jié) 179
5.1.1　虛擬視點(diǎn)圖像質(zhì)量度量總結(jié) 179
5.1.2　虛擬視點(diǎn)圖像質(zhì)量度量的應(yīng)用總結(jié) 180
5.2　展望 182