面向视频转码的视频去隔行研究

Video deinterlacing is often used to eliminate interlaced artifacts at the video decoding side for better subjective performance. This project aims at video transcoding applications, especially focusing on deinterlacing theories and methodologies at the video encoding side. Firstly, we will study the reliability, especially the maximum-a-posterior-based reliability, of motion information to reasonably select the motion information in bit-streams. Secondly, fine-grained fast deinterlacing theories and methodologies will be studied at the video encoding side based on region characteristics. The robustness to sudden changes like scene changes will be specially addressed in this part. Finally, frequency-domain deinterlacing theories and methodologies, especially the partially invertible deinterlacing theories and methodologies, will be studied based on characteristics of the H.264/AVC standard, the AVS standard, and the latest High Efficiency Video Coding (HEVC) international standard. It is expected that the above theories and methodologies will not only be beneficial to video compression and video transcoding, but can also open a new door for related research fields such as video retrieval.

视频去隔行通常用于在视频解码后端消除隔行效应，以增强主观视觉效果。本项目将面向视频转码应用背景，着重研究视频编码前端的去隔行理论与方法。首先，研究运动信息的可靠性度量方法，重点考虑基于最大后验概率模型的运动信息可靠性度量方法，以便合理选用码流中的运动信息。其次，面向实时转码需求，基于区域特性研究细粒度的编码端快速去隔行理论与方法，并着眼于提高对突变运动场景的鲁棒性。最后，针对H.264/AVC标准、AVS标准以及最新的HEVC国际标准的特性，研究压缩域的去隔行理论与方法，尤其是部分可逆的去隔行理论与方法。预期上述理论和方法不仅有利于视频压缩和视频转码的研究，还能为视频检索等相近领域提供一种新的研究思路。

本项目是在国际视频压缩标准H.265/HEVC刚刚定稿、国家标准AVS2正在制订的时代背景下提出的。对视频序列的处理通常包括采集、压缩、传输、转码、显示等五个环节，由于采集过程对科研人员来说一般是不可控的，因此本项目主要考虑压缩、传输、转码、显示等环节中的去隔行技术，并结合云视频平台展开了深入研究。经过三年的研究，项目组已发表或录用（含条件录用）11篇SCI/EI论文，出版专著2部，申请国家发明专利17项。本项目的部分衍生结果在工业界得到了实际应用，并获得了政府创业资助。. 本项目的研究成果可直接用于视频编码器、电视终端和智能监控，目标客户是视频编码器/转码器厂商和视频处理芯片厂商（如电视芯片、手机芯片厂商等）。项目组的技术有望为目标客户提供低成本、高性能的视频处理解决方案，增强其产品的市场竞争力。