还在为视频剪辑烧脑? 「索贝」的AI剪辑系统让短视频一键出片

孟欢酱@36氪四川·2019-11-20 22:29
在今年的国庆大阅兵现场,「索贝」牵手央视对现场的阅兵方阵进行了AI视频剪辑的实地操作。从大阅兵三军仪仗队进入视线开始,通过新闻云,AI引擎能够自动编辑前方70余个机位的画面内容,平均耗时90秒。

近年来,人工智能来势汹汹,在很多行业的应用都取得了巨大进步,视频剪辑领域同样如此。熟悉视频剪辑的都知道,素材导入、内容剪辑、抠细节、配音……一系列流程会耗费不少精力。而人工智能在视频剪辑领域的应用,将大大节省人力、提高效率。

特别是随着短视频市场的不断渗透,视频的“时效性”也愈发重要。据iiMedia Research(艾媒咨询)数据显示,短视频市场规模仍持续增长,预计2019年市场规模超过230亿元。随之而来,AI视频剪辑系统也会迎来一片蓝海。

图片来源:成都索贝数码科技股份有限公司

成都索贝数码科技股份有限公司(以下简称「索贝」)的“智能媒体实验室”便深耕于人工智能研发以辅助视频剪辑。具体来说,「索贝」的AI剪辑平台以图像识别技术为基础,结合语音识别等人工智能技术,设计开发了智能识别、有效镜头检测、自动合成剪辑等智能处理模型,通过模型的综合应用,实现智能剪辑功能。值得注意的是,AI剪辑不是简单的切条,其中也包括远全中近景、特写等各种镜头组合。

此外,在声画同步层面,「索贝」利用图像算法提取关键帧画面特征,找出声音信号和AI原画的帧差保证AI视频声画同步。为进一步夯实技术,目前「索贝」和上海交通大学合作成立计算机视觉联合实验室、与四川大学合作成立了自然语言处理及大数据分析联合实验室。

在今年的国庆大阅兵现场,「索贝」牵手央视对现场的阅兵方阵进行了AI视频剪辑的实地操作。从大阅兵三军仪仗队进入视线开始,通过新闻云,AI引擎能够自动编辑前方70余个机位的画面内容,平均耗时90秒。而如果以人工剪辑,每个方阵的视频剪辑完成需30分钟。整个阅兵期间,平均每隔3分钟就有一篇新闻从索贝的系统发出面向用户,满足了新闻的时效性。

现如今,人工智能剪辑软件已逐渐在市场上占据一席之地。如:苹果系统的Memories软件就利用了人工智能技术来剪辑短视频,它能够浏览并识别用户相册中最有意义的照片和视频,并自动生成精美的小短片。但就专业的新闻市场来看,「索贝」还走在行业前列,索贝数码智能媒体实验室经理罗宏智表示,一方面,「索贝」长期关注广电行业,对视频制作、客户需求把控精准;另一方面,深耕人工智能技术的研究也为AI剪辑提供了基础支持。

谈及下一步计划,罗宏智透露「索贝」的AI剪辑系统将会应用到更多领域,比如综艺、体育方面,“当一场篮球赛结束时,AI剪辑可针对现场快速制作精彩集锦,传递球场信息。”罗宏智说。团队层面,「索贝」负责AI剪辑的团队共30人,绝大部分为研发人员,包括计算机视觉、自然语言、ai应用开发等。(实习生杨国舒对本文亦有贡献)

+1
1

好文章,需要你的鼓励

参与评论
评论千万条,友善第一条
后参与讨论
提交评论0/1000

下一篇

在天府万科云城建设运营成都科学城政务服务中心,实现企业办事“只进一扇门”、“最多跑一次”;通过为政务服务插上“科技+”的翅膀,开启了数字化服务之路

2019-11-20

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业