Michal Ries等人在论文《Content Based Video Quality Estimation forH.264/AVC Video Streaming》中,描述了一种基于视频内容的视频质量评价方法。有一定的参考价值,在此记录一下。
该质量评价方法的特别之处在于,根据视频内容的复杂程度将视频分成了几类,每种类别分别使用不同的模型系数。而一般的视频质量评价方法通常只有一个模型以及一套固定的系数。
该论文将视频序列分为5类,以下是其中几类的截图(少了一类)
五类包括:
news(新闻):仅有一小块感兴趣区域在运动(比如人脸,一般占视频画面的15%),背景是静止的。
soccer(足球):包含大面积统一方向的运动。镜头通常会在一个统一颜色的背景下(绿色)跟踪一个快速运动的物体(足球)。
cartoon(卡通):主题在运动,背景是绝对静止的(没有自然特性)。
panorama(全景画):包含大面积统一方向的运动,运动方向是一致的。
rest(其他):除以上几种之外的视频都属于这一类。通常包含大量杂乱的运动,或者有很多镜头切换。
对视频内容进行分类的Content classifier(内容分类器)设计如下图所示:
下图统计了五种类别的视频中,统一运动所占的百分比以及零运动矢量百分比的经验累积分布函数。
注:ECDF全称empirical cumulative distribution functions,经验累积分布函数。
对Content classifier(内容分类器)进行测试的结果如下表所示。False detection反映的是对视频进行了错误的分类的百分率。就是视频本身属于其他类,却分到了这一类。Good match反映的是对视频进行了正确的分类的百分率。
由表可见,内容分类器基本上是比较准确的。
测试序列的设置如下表所示。测试序列时长为10秒,分辨率为SIF,编码为H.264 baseline profile 1b。下表所示一共有36种组合。
测试使用的设备如下图所示,是一个PDA。
下图是视频质量评价系统的设计。
实验结果数据分析方面,用到了principal component analysis(PCA,主成分分析)
注:主成分分析作用是:将多个变量通过线性变换以选出较少个数重要变量的一种多元统计分析方法。又称主分量分析。
PCA分析结果如下图所示。
注:BR代表码率。FR代表帧率。
最终给出的视频客观质量评价模型的形式如下:
最终给出的视频客观质量评价模型如下式所示:
注:BR代表码率。FR代表帧率。
并且给出了五种不同的内容相应的系数:
下表所示是对该模型性能的验证。
r代表的是皮尔逊相关系数(Pearson correlationcoefficient)
r'代表的是Spearman相关系数(Spearmank correlation factor)
该模型预测的视频质量和实际主观视频质量之间的关系如下图所示:
相关推荐
6. **多参考帧**:H.264支持多个参考帧,这增加了预测的灵活性,有助于提高编码效率和视频质量。 7. **循环内去块滤波器**:用于消除编码过程中产生的块效应,提高视觉质量。 8. **字节流解析**:解码器需要理解并...
总结来说,“strred.rar”文件中包含的研究工作为视频质量评价提供了一个基于机器学习的新视角,这有助于我们更准确地量化视频质量,从而在视频压缩、传输和显示等领域提升用户体验。这种技术在现代的流媒体服务、...
采用多个不同的公开视频序列为测试源,选取常见的H.264/MPEG-AVC、H.265/MPEG-HEVC、VP8、VP9标准和基于小波的Hitav对应的编码器搭建评测平台对各编码器进行性能评价实验。实验表明,H.265和VP9在视频质量、码流节省...
为了提高无线视频传输的主观视觉质量,提出利用结构相似度(SSIM)作为失真描述方法来综合配置应用层H.264/AVC视频编码量化参数和物理层调制与编码模式的跨层优化无线视频传输方法。实验结果表明,与非跨层优化视频...
HEVC/H.265继H.264/AVC之后,旨在提供更高的压缩效率,能够在更低的比特率下实现与H.264相同的视频质量,或是在相同的比特率下提供更高质量的视频输出。 在2010年,视频编码领域的两大组织VCEG(Video Coding ...
视频质量评价是多媒体处理和内容分析中的一个重要环节,它可以帮助我们评估视频编码、传输、存储等过程对视频质量的影响。`Evalvid` 是一款专业的视频质量评估工具,主要服务于研究人员、开发人员以及内容提供商,...
- **数字标牌**:支持MPEG-4 1080p和H.264 720p视频流,用于展示广告等内容。 - **多通道DVR**:同样支持MPEG-4 1080p和H.264 720p视频流,适用于监控中心等场合。 通过上述介绍可以看出,基于DM365的网络摄像机...
《深入理解x264与libx264:基于VS环境的编译与应用》 x264是一个开源的、高效的H.264/AVC视频编码器,而libx264则是其核心编码库。...无论选择哪种方式,libx264都能帮助你实现高效、高质量的H.264编码。
在视频编码如MPEG4和x.264中,PSNR被广泛应用于视频质量的分析与优化。视频编码器的目标是在保证视觉质量的前提下尽可能地减少数据量,PSNR作为衡量这一目标实现程度的关键参数,对于编码算法的改进和优化至关重要。...
总的来说,本文提出的基于H.264标准的快速运动估计算法通过结合DCS和阈值估计,实现了高效且精确的运动估计,对提升视频编码效率和优化视频质量具有重要意义。这种方法不仅减少了计算复杂度,而且能够在不同运动类型...
综上所述,ITU-T P.1204.3标准提供了一套新的基于比特流的视频质量评估方法,它既具有广泛的适用性,又能够提供精确的质量评估结果,为视频内容提供者和服务商优化视频流服务提供了有力的工具。
本文主要研究了基于H.264/AVC的可分级视频编码(SVC)中四种针对整帧丢失的差错隐藏算法。H.264/AVC是一种广泛使用的视频压缩标准,它提供了高质量的视频压缩效率,因此成为了数字视频通信和存储的常用标准。SVC是H....
基于所提出的多目标性能评价模型,研究者们对主流的高清视频编码芯片H.264/AVC进行性能评价和比较。这一研究为优化H.264/AVC编码芯片架构提供了重要的参考价值,并且对于新一代HEVC(高效视频编码)编码芯片架构的...
其次,对H.264压缩域特征和HEVC的CTU块划分模式进行相关性分析,并发掘CTU块划分模式在时序上的相似性,进而提出基于时间递归神经网络(LSTM)三级分类器来预测HEVC的CTU划分。 实验结果表明,该算法实现了60%的...