基于超高分辨率全景视频的VR系统研究

发布时间：2023-03-25 06:56

　　近年来,随着虚拟现实技术的不断发展,人们的视听体验得到了极大的丰富。VR全景视频是最热门的VR业务,被广泛应用于诸多场景,受到了工业界与学术界的一致关注。相对于传统视频,全景视频包含全方位视觉信息,因而需要更高的分辨率。16K以上的超高分辨率的全景视频包含更多的细节,支持更丰富的播放方式,允许用户将感兴趣的区域放大观看,从而给用户提供更多的信息量。然而如此大的分辨率,对网络传输带宽以及终端播放性能提出了巨大的挑战,同时对视频的呈现方式和渲染方法提出了新的要求。本文研究了3DOF和3DOF+两种自由度下基于超高分辨率全景视频的VR系统,提出了基于视频分tile的视点自适应分块传输方法降低传输带宽和实际处理的视频分辨率,解决了超高分辨率全景视频传输、解码和渲染的问题。在3DOF VR系统中,本文提出了4种VR放大镜模式,能够将用户视点位置的视频放大呈现到视窗中央的圆形区域,与此同时视窗的其他区域不放大,从而允许用户在播放过程中将感兴趣的区域进行放大以观看细节。使用64K超高分辨率全景视频保证放大时的清晰度。对于超高分辨率全景视频的传输与播放,首先将全景视频均匀划分为1152个1280×12...

【文章页数】：107 页

【学位级别】：硕士

【文章目录】：
摘要
ABSTRACT
符号对照表
缩略语对照表
第一章 绪论
    1.1 研究背景与意义
    1.2 论文研究内容
    1.3 论文组织结构
第二章 基于超高分辨率全景视频的VR系统相关技术
    2.1 引言
    2.2 虚拟现实技术
        2.2.1 视场角
        2.2.2 自由度
    2.3 OpenGL渲染技术
        2.3.1 OpenGL渲染管线
        2.3.2 坐标空间变换
    2.4 全景视频相关技术
        2.4.1 全景视频投影格式
        2.4.2 视频分tile传输
        2.4.3 码流融合
        2.4.4 视频解码
    2.5 本章小结
第三章 基于超高分辨率全景视频的3DOF VR系统
    3.1 引言
    3.2 基于超高分辨率全景视频的3DOF VR系统分析
        3.2.1 VR中视频平移缩放分析
        3.2.2 超高分辨率全景视频的解码渲染分析
    3.3 基于超高分辨率全景视频的3DOF VR系统实现
        3.3.1 系统整体框架
        3.3.2 码流加载
        3.3.3 码流融合
        3.3.4 视频解码
        3.3.5 渲染
    3.4 实验结果与分析
        3.4.1 传输带宽分析
        3.4.2 播放效果对比与分析
    3.5 本章小结
第四章 基于超高分辨率全景视频的3DOF+VR系统
    4.1 引言
    4.2 基于超高分辨率全景视频的3DOF+VR系统分析
        4.2.1 3DOF+模式下视频缩放分析
        4.2.2 3DOF+模式下计算视窗所覆盖的tile分析
        4.2.3 分块渲染方案分析
    4.3 基于超高分辨率全景视频的3DOF+VR系统实现
        4.3.1 系统基本框架
        4.3.2 tile划分方式
        4.3.3 球面模型划分方式
        4.3.4 tileMask更新方式
        4.3.5 层次切换控制
        4.3.6 码流融合与CUDA解码
        4.3.7 分块渲染
    4.4 实验结果与分析
        4.4.1 传输带宽分析
        4.4.2 播放效果与分析
    4.5 本章小结
第五章 总结与展望
参考文献
致谢
作者简介



本文编号：3770774