《中国历代版图(清晰美图)》.doc

,时间可伸缩性可以通过分级B帧编码结构实现。通常,一个视频序列的第一幅图像作为立即解码更新(IDR图像被帧内编码。关键帧可以编码为I帧(例如,为随机读取),也可以编码为P帧,并采用前一个关键帧作为运动补偿预测的参考。关键帧所组成的序列与视频序列中的其它任何图像无关,因此,在通常意义上,该序列代表了可以得到的最小时间分辨率。图像组中的其它图像编码使用B帧,,。很重要的一点是,B帧编码的顺序是按照金字塔分级的顺序进行的,下一个时域级别的帧只使用较低时域级别的帧作为参考来预测,依次类推。通过这样的一个在时域上分等级的编码结构就内在地实现了时域可伸缩性。所有的关键帧组成了最粗糙时间分辨率的视频序列,随着在编码顺序上的图像的递增,时间分辨率也跟着增加,最终达到完全时间分辨率的视频序列。图a所示为4阶层次化B帧的典型结构,此结构可提供4个时域等级,从低到高为{T0},{T0,T1},{T0,T1,T2},{T0,T1,T2,T3},分别具有1/8,1/4,1/2帧率和原始帧率。另外,通过限制运动补偿预测的参考图像是否必须按显示顺序之前编码的图像,便可以任意调整编解码器之间的结构性时延。以图c为例,该等级预测结构屏蔽了后向运动补偿预测。尽管该结构所提供的时域可伸缩的等级与图a结构所能提供的相同,但其结构性时延是0帧,而后者为8帧。由于仅采用前向预测,所以图c所示结构也称为等级P帧预测结构。等级P帧预测结构通常用于实时性要求较高的应用,如视频会议等。当预测结构满足低时延要求时,随之而来的代价便是编码效率的下降。在用等级P帧预测结构时,需要特别注意避免时域块效应。这种块效应由时域预测链的断裂导致,即当某一帧质量较差时,后续用它做参考预测的帧,其编码质量将受严重影响,在码率较低时尤为明显。图1时域分级示意图注:可以通过依次丢弃棕色、绿色、蓝色得到不同帧频的码流。空间可伸缩编码空间可伸缩性指的单个的视频序列可以使用多种不同的分辨率来显示,(1)层间帧内纹理预测xInitControlDataLowPass:xIntraUpsampling:xCompIntraUpsampling:xBasicIntraUpsampling帧内上采样当对宏块纹理使用帧内预测模式进行编码时,,SVC新定义了一种INTRA_BASE宏块模式。使用此模式的宏块可用其低级空域层中相应帧中重建的宏块纹理来对当前宏块的纹理进行预测。在预测之前,先使用去块效应滤波器对低层重建宏块内部边界(当使用4X4的帧内预测,或非16X16的帧间预测时)以及宏块周围边界进行滤波,再将滤波后的宏块在每个方向进行4像素的边界扩展,最后进行插值。Intra上采样顾名思义就是对基层重建中的Intra宏块进行上采样,我们在处理时,是对整帧的数据处理的,基本的流程图如下:从流程图上可以看到Intra上采样的过程可以分为3个基本过程:层间Deblock,Intra周边宏块处理和分量上采样的过程,对于层间Deblock过程,其滤波强度与一般的Deblock有所不同,这边不对其做具体展开说明,可以参考Deblock的相关文档。Intra周边宏块处理主要针对Intra周边的Inter宏块做处理,对于一个宏块来说,有以下几种情况需要处理:Intra块,这时宏块数据不需要特殊处理;Inter块,这时需要更据宏块的周边宏块信息作处理周边都是Inter块,则宏块信息清零;周边有一边为Intra块,则复制Intra块数据给当前宏块;周边有多边为Intra块,则通过周边宏块数据插值给当前宏块。接下来就是YUV分量上采样。层间帧内预测是通过重建基本层对应的块,然后对该块进行上取样,以该上取样值作为增强层宏块的预测值。其上取样过程为首先计算增强层宏块每个像素在基本层对应的像素值,然后计算增强层宏块该像素所对应相位值,根据该相位值在表2-1或表2-2中找到对应的滤波器,最后根据基本层的像素值和对应的滤波器来进行上取样得到增强层像素的预测值。值得注意的是亮度像素和色度像素的上取样是不同的:亮度上取样采用4抽头多相位插值滤波器,通过增强层像素点计算得到对应的相位和基本层的像素点,通过相位找到对应的滤波器,然后取基本层的像素点和它前面的一个像素及后面的两个像素,一共4个像素,利用该滤波器和得到的4个像素进行上取样,得到对增强层像素亮度的预测值,表2-1是亮度滤波器。色度上取样跟亮度上取样很相似,也是通过相位得到对应的滤波器,只是它取对应基本层像素点和后面相邻的一个点,共2个点和滤波器进行上取样,得到对增强层像素色度的预测值,表2-2是色度滤波器。intfilter16_lum