| 成果简介: |
该项目属于影视技术领域。近年来,随着国家经济发展进入新阶段,中国对文化“软实力”提升的需求日益强烈,电影在国家文化形象建设和国家软实力表达方面能起到重要的作用。纵观全球电影工业生产中的高新技术,中国电影工业化发展的瓶颈主要体现在电影特效领域。针对视效编辑智能化不够、群体动画制作效率低下、电影特效真实感不足等关键技术瓶颈,该项目围绕电影特效智能制作关键技术开展了系统研究,取得了一系列的创新技术及影视领域的重大奖项。
1、在面向超高清视效的智能编辑与处理方面,该项目提出基于子像素卷积深度网络的超分辨率重建,提升影视素材的分辨率;为了实现对输入视频素材的修复和目标移除,研发基于低秩矩阵恢复的目标移除方法;针对视频素材的高效彩色化,构建基于深度卷积神经网络的智能着色模型;为了解决3D视频素材的编码差错问题,提出基于视差补偿预测与帧内复制预测混合的编码算法。
2、在面向大场面的智能群体动画设计方面,该项目提出基于深度强化学习的智能路径规划,实现智能体在未知复杂环境下的智能寻路;构建基于Voronoi的群体队形控制方法,实现具有美感、整体、条理的队形变换效果;研发基于环境感知的高分辨率高速红外动作捕捉方法,实现红外多目标跟踪定位和高精度人物肢体动作解析;研发CPR回归器的无标记点表情重演方法,实现基于无标记点的人脸特征捕捉和表情重演。
3、在融合电影美术风格的CG特效智能渲染方面,该项目提出面向电影美术风格的非真实感渲染技术,研发符合特定电影美术风格的Renderman中NPR-Displayfilter插件;提出基于深度神经网络的艺术风格调整,实现影视素材的艺术风格转换处理;为了能够在颜色、细节和光照上获得高保真的转移结果,构建电影色彩风格转移中统一的保真度优化模型;针对电影HDR风格的智能化高效合成,提出基于卷积神经网络的HDR风格合成方案。
4、项目研发的影视群集动画软件、高精度面部采集及数字虚拟演员系统、光学动作捕捉系统等相关成果在SMG、成都心智网络科技有限公司、诺华视创电影科技(无锡)股份有限公司、上海青瞳视觉科技有限公司等企业中获得10多项重大应用,电影特效智能制作技术已经在《妖猫传》、《曹操与杨修》、《这里的黎明静悄悄》等多部院线影片中完成了技术转化,取得巨大的社会效益和9048万的直接经济效益。项目相关成果荣获美国最佳8K制作“金卢米埃尔”奖、美国第70届技术及工程艾美奖、第32届中国电影金鸡奖最佳电影美术奖、第26届中国金鸡百花电影节“优秀学术论文奖”等。
该项目获得发明专利授权4项,获得软件著作权6项,发表高水平学术论文20篇。该项目有力地推动了影视制作行业的技术进步,取得一系列创新成果,相关研究成果获得国际3D先进影像协会、美国国家电视艺术与科学学院、中国电影家协会、中国科学院上海科技查新咨询中心等多家权威机构、著名导演陈凯歌高度评价。经查新,该项目综合技术达到了国际先进水平。 |