没有合适的资源?快使用搜索试试~ 我知道了~
简单的介绍三维视频相关的概念,技术和H.264与VR知识点,以及三维显示的技术。
资源推荐
资源详情
资源评论
三维视频技术处理及应用
一、三维视频编码技术
1. 编码的概念
将信息按照一定规则使用某种形式的流码表示与传输。
2. 视频编码的主要目的
数据压缩
3. 三维视频系统的工作流程
① 数据采集:通过多摄像机阵列在同一时刻对同一场景或对象
进行多视角视频信号的采集。同时要对各摄像机进行标定,以确定
每一摄像机的几何参数。
② 视频数据预处理:对得到的多路视频数据进行格式转化、亮
度/颜色补偿校正、插值、滤波等处理。若摄像机为深度摄像机,则
对直接得到的深度图进行错误数据校正、滤波、去噪等处理。若为
普通摄像机,则从多视点图像和摄像机几何参数中计算出场景的深
度信息。
③ 编码:对未压缩格式视频进行某种三维视频格式的压缩。
④ 传输:通过 IP 网络流传输压缩后的码流。
⑤ 解码:从压缩后的码流中解码获得数据
⑥ 重建、显示:重建生成一定视角范围内的各视点,并将视频
显示在三维显示设备上。
4. 基于对象的编码
传统的视频编码技术是以帧为单位进行的,每帧视频由其基本单元--像素
组成的。这种描述方式比较直观且能得到较高的视频质量,但缺乏内容描述能
力,限制了交互性的发展。而网络视频游戏、交互性数字电视等技术的发展又
使得对内容交互性的需求不断增长,基于对象的概念就是在这种背景下提出来
的。它利用人眼的视觉特性,从轮廓、纹理的思路触发,支持基于内容的交互
操作。相对于传统的基于帧的描述方法,基于对象的视频编码被称为第二代视
频编码、MPEG-4 是最早支持基于对象编码的视频压缩标准。
基于对象的视频编码中,编码的基本单元是任意形状的视频对象。其基本
思想就是将一组输入的视频序列分割成多个视频对象和相应的背景及辅助信息,
对每部分内容分别进行编码、存储、处理和传输。解码端根据需要灵活选择各
个视频对象,合成所需的画面。这种新的视频描述方式不仅使基于内容的交互
操作简单易行,而且可以根据内容灵活的进行编码比特的配置,为编码性能的
提高打开一个新的思路。在基于对象的视频系统中,背景信息通常被视为是不
重要的。可以采用传统的基于帧的编码方式来处理。关键之处在于任意形状视
频对象的编码,而视频对象的分割作为编码的前提,也需要给予一定的重视。
基于对象的视频编码分为对象分割提取和对象编码两部分。分割算法大体
可分为时域分割、空域分割和时空域分割三类。对象编码利用视差补偿预测
DCP、运动补偿预测 MCP 等技术来完成形状、纹理和运动的编码。目前研究
较多的是基于块的三维视频编码.
① 视频对象的分割和提取
视频对象的分割和提取是基于对象视频处理的基本前提,在新一代视频编
码
思想提出之初就受到了相当的重视,并且一直是研究的热点和难点。具体来讲
主要包括自动分割和半自动分割两个方面。
自动分割在不需要人工参与的情况下,通过综合利用序列图像的时域和空
域信息,由计算机自动完成对视频内容的分割。时域分割确定运动对象的位置,
空域分割确定对象区域的精确轮廓,最终产生分割结果。目前的自动分割算法
主要用来实现运动对象的分割,只适用于一些简单景物或特定的视频序列。它
能够实现实时分割,但分割结果往往不能令人满意。这是由于视频对象的分割
涉及对视频内容的分析和理解,因而与人工智能、模式识别等学科有着紧密联
系。鉴于相关领域的研究现状,自动分割要达到很好的效果目前还存在相当的
难度。
半自动分割通过借助一定程度的人工辅助来提升分割的效果,分割过程中
用户参与划出序列关键帧中视频对象的基本轮廓,然后由计算机采用图像处理
的方法得到精确的边缘曲线,进而在后继帧中对视频对象进行自动追踪。另外
也可以考虑对运动对象采取自动分割,静止对象人工辅助分割等。一些简单的
人工操作将带来分割效果的很大提高。半自动分割由于人工的参与,难以实现
对视频的全自动实时处理,只能用于一些非实时的场合。
② 视频对象编码
基于对象的视频编码是以任意形状视频对象的编码为基础的。一组视频序
列
被分解成多个视频对象,每个视频对象由一系列在时间上相继的视频对象平面
组成。视频对象平面是基本的编码单位,通过形状、纹理和运动信息来描述。
形状信息的使用不仅可以增强图像的主观质量,提高编码效率,也方便了基于
对象的视频描述和交互性操作功能的实现。
5. 基于块的编码
5.1 H.264/AVC 视频编码技术
剩余15页未读,继续阅读
资源评论
祥清
- 粉丝: 2
- 资源: 1
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功