弥补3D内容稀缺的短板,「聚力维度」用 AI 将2D转3D的效率提升千倍

张达·2017-10-09 08:46
3D内容的获得门槛大幅下降,将推动3D产业的重塑。

三维世界与三维感知认知

也许大部分人都不知道,身处的三维世界的我们,日常视线所及都是二维的平面图。后续通过人类大脑对二维图像进行后期处理,才形成了我们对于世界的三维认知。正因如此,目前从事三维显示的数字设备有两种不同的技术路径。

第一种是“造世界”的方式,即通过体像素以及全息的方式实现。体像素是在真实空间中创造三维像素,而全息则是去创造三维物体光的信息;另一种路径是“欺骗人眼”,即通过以双眼器官为基础的视差与聚焦的认知方式,融合先天带有三维认知能力的大脑,目前3D电影便是采用了基础视差的原理。

从上到下依次为:体像素、全息投影与基于视差的三维画作

3D 行业的局限性

如上文提及的两种实现三维感知的技术路径,基于双目设备的视差与聚焦是实现商业落地最快的路径,其中3D电影是离我们生活最近的商业应用之一。随着“阿凡达”上映以来,中国的3D行业曾迎来一波热潮,2014年的 3D 电视销量一度超过4000万台,相关的硬件与技术层出不穷,但是3D 行业后续的发展却不尽人意。归根到底,是由于市场缺乏3D的优质内容,而缺乏内容的原因在于3D内容的获取成本居高不下。

目前获取3D内容有两种方式,一种是直接通过双机实拍,但是这种方式存在着适用范围窄以及成本高的问题。适用范围窄主要体现在双机拍摄的过程中,镜头无法处理远景、聚焦以及强光照的情况 ,这也导致了3D实拍对题材和镜头有诸多限制。另一种方式是拍摄完影片后将其转制成为3D格式,目前这套技术已经非常成熟,国内也有固定的团队专门为院线电影提供转制的服务。

3D拍摄的《阿凡达》与3D转制的《泰坦尼克号》

然而,后者也存在巨大问题,即一部2小时电影的2D转3D至少需要100人的团队逐帧转制,通过“图像分割-立体绘制-背景补图-合成渲染”的流程,需要3个月的时间。目前国内院线级电影的3D转制费用大概在300~500万人民币之间,2012年4月上映的泰坦尼克号3D重置版的转制费用为1800万美元。

目前3D行业的基本格局是:终端多样化,但内容贫乏。据公开数据显示,2015年2D的PGC内容或剧集有15,000多集,而3D内容只有69部。

用 AI 提升2D转3D的效率

聚力维度创始合伙人兼CTO赵天奇告诉36氪,聚力维度前身为十二维度(北京)科技有限公司,创立于2012年,一直聚焦于将人工智能与影视结合。通过3年的底层研发,赵天奇表示,聚力维度自主研发的类人认知3D转制系统“峥嵘”已经能够实现在1个人1台机器的情况下,用一周时间完成一部院线级电影的转制。其中机器只需要2个小时的转制,后续只需要一名人力对电影进行后期的艺术层补偿与3D感的微调。

除了效率的提升,赵天奇表示峥嵘系统能够保证转制后的像素输出结果不变,以及能够将2D画面中的各类物体按照真实世界比例进行立体还原。在暗黑场景,近色同亮等高难度画面上,效果显著超过手工。赵天奇进一步解释道,峥嵘系统的背后利用了诸如多级认知、对抗认知等多个深度学习算法模型,目前更新的第五代系统在测试环境下已经实现了对任意内容平台上的2D内容进行实时转制,采访过程中聚力维度向36氪展示了对CCTV5正在直播的足球赛事进行实时转制。

基于这套解决方案,聚力维度当下的盈利模式主要分为以下3个模块:

  1. 为电影电视以及广告等节目提供 3D内容的转制付费服务

  2. 与内容运营平台共建3D媒资库,共享内容版权的收益

  3.  上线峥嵘云平台,为C端用户提供短视频以及图片的转制服务,收费方式可以由C端承担也可以通过API接口的方式提供给软件商

赵天奇认为,过去作为行业短板3D内容的补足,3D行业将迎来拐点。从上游的内容资源、核心显示器件,到中游的产品整体方案设计、整机生产,再到下游的应用开发都能够得到整体提升。

目前包括《新警察故事》、《寻龙诀》、《幻城》、《执念师》等电影作品都是由聚力维度提供转制服务。

聚力维度团队全职员工不到50人,其中8成为研究人员。董事长兼CEO 王绪兵1988年至1994年在日本从事软件开发工作,1995年创立中讯软件集团,任公司总裁。2004年中讯在香港主板上市,成为当时中国最大的软件外包公司。2012年退出中讯,创立十二维度公司,也就是现在的聚力维度;创始人兼CTO赵天奇为北邮博士、清华大学博士后。长期从事三维显示、计算机视觉和人工智能技术研究。自研究生阶段开始创业,拥有近十年产学研结合创业经验。曾创办国内唯一拥有自主知识产权的3D电影转制公司,达成多部好莱坞一线电影的3D转制合作项目。

+1
5

好文章,需要你的鼓励

参与评论
评论千万条,友善第一条
后参与讨论
提交评论0/1000

下一篇

看看程浩以投资人的身份怎么说AI创业。

2017-10-09

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业