基于三维感知的虚拟视点绘制研究

发布时间：2021-10-22 06:30

　　人们对视频观看体验的不断追求,使近年来生活中出现了各种新型的视频应用,进而催生了计算机网络技术和音视频技术的不断发展。自由视点视频系统（FVV,Free Viewpoint Video）允许用户自由选择观看视点,带来前所未有的沉浸式互动观看体验。但是该系统需要的数据量也相当巨大,对采集、编码、传输、解码、绘制、显示等各个流程均提出了更高的要求。因此FVV采用基于深度图的绘制方法（DIBR,Depth Image Based Rendering）,通过在编码端采集的有限数量参考视点,在解码端绘制任意位置的虚拟视点,极大地降低了FVV传输的数据量。DIBR的核心是利用深度信息来还原拍摄场景的三维空间,进而实现视点映射。本文以提高虚拟视点三维感知质量为主要目的,研究了基于三维感知的立体虚拟视点质量评价方法和基于深度背景建模的虚拟视点空洞填补算法。（1）立体虚拟视点主要包含两大失真类型:单视点绘制失真和立体视点不匹配失真。针对单视点绘制失真,首先提取当前视点失真图与参考图的差异区域,再针对该差异区域计算平均结构相似度指数（SSIM,Structure Similarity）,最后将左右视点指数... 

【文章来源】：宁波大学浙江省

【文章页数】：65 页

【学位级别】：硕士

【文章目录】：
摘要
abstract
引言
1 绪论
    1.1 研究背景与意义
    1.2 国内外研究现状
        1.2.1 立体虚拟视点质量评价
        1.2.2 虚拟视点空洞填补方法
    1.3 主要工作和创新点
    1.4 本文的结构安排
2 自由视点视频系统和人类视觉感知特性
    2.1 自由视点视频系统
        2.1.1 视频信号的采集
        2.1.2 DIBR技术
        2.1.3 虚拟视点失真类型
    2.2 人类视觉感知特性
        2.2.1 人类视觉系统
        2.2.2 视觉感知模型
    2.3 本章小结
3 基于三维感知的立体虚拟视点图像质量评价方法
    3.1 基于感知的立体虚拟视点图像质量评价模型
        3.1.1 单目纹理特征
        3.1.2 双目竞争特征
        3.1.3 特征融合
    3.2 实验结果及分析
    3.3 本章小结
4 基于深度背景建模的虚拟视点空洞填补算法
    4.1 空洞成因及特征分析
        4.1.1 空洞生成原因
        4.1.2 深度时域直方图统计特征分析
    4.2 基于深度的时域稳定背景模型
        4.2.1 深度背景建模
        4.2.2 纹理背景建模
        4.2.3 融合和空洞填补
    4.3 实验结果及分析
        4.3.1 实验设置
        4.3.2 客观评价
        4.3.3 主观评价
        4.3.4 阈值选择
    4.4 本章小结
5 总结与展望
参考文献
在学研究成果
致谢


【参考文献】：
期刊论文
[1]基于BJND和JNDD的立体视频深度感知增强技术综述[J]. 刘峰,施阳,干宗良,秦雷,陈昌红.  南京邮电大学学报(自然科学版). 2015(01)

博士论文
[1]基于人类视觉系统的图像信息感知和图像质量评价[D]. 吴金建.西安电子科技大学 2014

硕士论文
[1]基于视觉感知的深度视频信号处理[D]. 毕伟.宁波大学 2013



本文编号：3450559