2023年山东省广电行业科技创新案例系列之《基于模板化制作的AI数字人资讯包装》
【慧聪广电网】山东省广电行业积极推动人工智能、高新视频等前沿科技的落地,大力开拓高新技术的新领域、新业态。2023年,在国家广电总局举办的第三届广播电视和网络视听人工智能应用创新大赛,以及第三届高新视频创新应用大赛中,山东省斩获佳绩,15个项目获奖,取得了获奖总数历届最多、一等奖总数历届最多的优异成绩。
广电因技术而生、因技术而兴,必将依靠新技术创新发展。为了助推山东省广电行业科技创新高质量发展,展现山东省广电行业前沿科技项目案例,我们将获奖项目选编汇集,以供学习和借鉴。
《基于模板化制作的AI数字人资讯包装》获第三届广播电视和网络视听人工智能应用创新大赛(MediaAIAC)虚拟数字人技术应用三等奖。
基于模板化制作的AI数字人资讯包装——淄博市广播电视台、深圳迪乐普数码科技有限公司、山东井象信息技术有限公司
一、项目简介
我们采集淄博市广播电视台主持人杨洁的形象和声音素材,综合应用超写实虚拟数字人、模板化包装、深度神经网络、信创三维渲染引擎等最新技术,创造了广播级4K超高清AI真人数字人“杨小洁”。“杨小洁”数字人的形象气质、语音语调、表情动作等与真人相似度达到90%,是全国首个基于模板化系统创作的广播级4K虚拟数字人,同时创造了一种4K高效新媒体微视频/广播级电视栏目制作方式。
二、应用情况
“基于模板化三维图文包装+AI虚拟数字人”的视频制作方式实现了场景/动画编辑制作与视频播出制作分离,将虚拟数字人作为虚拟场景中一个元素,预先制作大量组合动画模板,实际使用中只需调用动画模板修改各类元素即可快速生成最终成品视频/微视频。《基于模板化编辑的AI数字人视频生成方法、装置及设备》等5项自主知识产权获国家发明专利申请和国家发明专利证书。
一是在融媒体演播室的AI数字化发展方向,针对部分电视栏目制作,例如新闻、财经等,AI数字人资讯包装系统可达到同真实演播室同样的栏目效果,同时无需演播室景区灯光、无需演播室传统摄录编设备、无需导播摄像主播人员、无需后期非编剪辑,一台AI数字人资讯包装系统即可生成成片视频。
二是高效新媒体微视频制作工具。针对各类常见微视频应用预先定制好各类模板动画,使用时只需改变图片、文字、PPT等素材,即可快速生成任意酷炫的微视频,并直播推流。
三是城市数字IP形象共享式生成工具。全流程云端部署,使得各地融媒体中心的虚拟数字人IP通过客户端软件广泛共享使用。
四是虚拟数字人和真人主播的合作。AI数字人资讯包装的虚拟数字人、模板动画条目也可以和融媒体演播室的各类图文栏目包装产品共享、混合编辑,实现虚拟数字人和真人主播共同支持栏目,实现虚拟数字人IP的效益最大化。