基于视觉感知的可伸缩视频编码技术的研究

本项目以视频流媒体为研究对象，提出了融合视频内容分析和视觉感知特性的可伸缩视频编码方案。在基于内容的视频描述和视觉感知特性分析的基础上，采用视觉感知敏感性分布图的方法研究可伸缩视频编码，根据截断点视频的失真程度选择编码层次；引入3个评价尺度，提出一种新的视频质量评价体系，建立一种可实时计算的度量指标，以量化的形式反映人的主观视觉感知；提出新的原子层级结构图，把原子结构及其组织策略的确定转化为多约束条件下求局部极值的数学问题，提高编解码效率；基于视觉感知敏感性分布图调整和精细化率失真优化模型中的拉格朗日乘子，解决可用带宽下最优码率分配问题；应用内容分类器，按照视频单元的内容感知特性选用不同的差错控制方案。构建实验平台，以JSVM编解码的输出视频为参照，从主观评价、客观测量两个方面做视频质量对比研究。本项目的研究成果能够提高可伸缩视频编码的自适应性、有效性和鲁棒性，并可拓展到其他研究领域。