国家高技术研究发展计划(863计划):基于视频素材分析与融合的虚拟场景生成技术与系统

影视、广告节目的制作中,拍摄比例通常为10:1,实际拍摄的素材是最终剪辑完成影片长度的数倍甚至数十倍,如何充分地利用已经拍摄完成的视频素材合成希望效果,是当前迫切需要解决的问题。本项目的主要目标就是开发一个基于视频素材的虚拟场景构建系统,能够以真实视频为输入,提取视频中相关的场景对象,通过重新融合、视角变换和虚实结合,产生出比几何虚拟场景更具真实感的场景效果,为影视及广告制作和虚拟事件合成等提供虚拟场景的生成工具。项目的完成不仅能为影视和广告制作提供方便,充分利用可以利用的视频素材,节省大量的拍摄浪费,产生巨大的直接经济效益,同时通过对影视创作软件、影视制作资源库的商业化推广,还能有利于提高我国影视制作企业的竞争力,在发展具有我国传统文化特色的影视作品方面将起到重要作用。

主要研究内容:

1.层次化结构的视频素材库管理

树形结构管理示例
树形结构管理示例
存储结构 对象
存储结构
对象

2. 虚拟场景对象的快速提取技术^ TOP

单帧前景提取
单帧前景提取
帧间前景预测
帧间前景预测
前景对象的mask
前景对象的mask

3.视频一致性融合^ TOP

4. 视频图像编辑^ TOP

对像编辑
对像编辑
静止图像合成流体视频
静止图像合成流体视频
视频编辑属性传播
视频编辑属性传播

5. 内容敏感的虚拟场景快速缩放^ TOP

6. 基于静止流体图像的视频分析合成^ TOP

7. 风格化快速建模和渲染技术^ TOP