落地动态人物三维重建技术，Owlii 在双11 把范冰冰“快递”到你家

双11晚会越来越高大上了，去年隔屏送志玲姐姐姐姐的风衣，今年把范冰冰“快递”到家。

今年“天猫双 11 狂欢夜”中，设置了大型跨屏 AR 真人互动体验环节——“明星到你家”。晚会进行时，观众只需在天猫或淘宝手机客户端通过“摇一摇”进入体验环节，将正在直播舞台上表演的两位女神—— 范冰冰、卢靖姗 ——“召唤”到自己家中。观众则可以与两位女神面对面、多角度、零距离的互动，比如和传送到家中的女神一起做出各种动作来合影。

和去年“跨屏抢星衣”的 AR 互动相比（林志玲在直播现场脱下风衣扔向屏幕，风衣穿电视屏而过，观众在手机上抢夺这件风衣），今年“明星到你家”的形式，则给了用户一定的创作空间。

36氪了解到，本次天猫双十一晚会“明星到你家”跨屏互动环节的动态人像制作技术由 Owlii 团队提供，36氪此前也曾对Owlii 进行过报道。Owlii 成立于 2016 年初，团队成员主要来自清华大学，公司专注于三维交互技术，希望让人们可以通过三维影像进行娱乐与通讯。

这次跨屏互动主要利用了 Owlii 的动态人物三维重建技术（也称为容积捕捉，Volumetric Capturing）。动态人物三维重建软硬件系统复杂，技术门槛高，目前世界上仅有几家公司能够完成。 Owlii 则自主研发了包括捕捉、重建、压缩、传输、渲染等技术在内的全套系统，且在成像的质量、压缩两方面做到更优的效果，尤其是在移动端。

此次合作，范冰冰与卢靖姗提前在Owlii的办公室，使用Owlii自主搭建的深度摄像头阵列进行拍照。这些图像数据会上传到云端服务器，进行人体建模，经Owlii进行压缩处理，由阿里在天猫的客户端进行分发，经用户天猫或者淘宝客户端的渲染引擎、Owlii提供的解码引擎呈现。未来保证适配更多移动终端，Owlii提供了针对不同手机终端压缩生成了多个内容版本。Owlii告诉36氪，这些版本中最大的码率也不超过 5Mbps。

此次与天猫双十一晚会的跨屏互动合作也是Owlii 结合三维人像内容和手机 AR 的一次尝试。当前，Owlii基于自主研发的3D动态重建技术，适配主流的手机摄像头，开发了一套基于Mobile AR 的视觉解决方案，并以Case by Case的方式与广告商、影业等行业合作，推出定制化的视觉方案。未来，在手机 AR 平台上 ，Owlii 表示也会针对广告营销、IP 运营及消费者产品进行更多的尝试。

此前，温子煜曾向36氪介绍了Owlii的战略路径：2017~2018年公司将聚焦于Mobile AR/MR 为行业提供技术内容，并通过技术解决方案引导用户产生UGC内容；2019年推出基于VR/AR头显的远程会议解决方案，通过3D动态成像技术，视频会议中跟你一起参与会议的每一人的每一个表情和动作都将通过头显或其他输出终端进行捕捉。团队希望，通过结合MobileAR中的三维交互内容，和AR/VR远程传送赋予人们的虚拟社交能力，最终实现Holodeck、银翼杀手中描绘的虚拟娱乐和通讯场景。

 Owlii 团队成立于2016年年初，主要来自清华、北大和一些北美高校，致力于为人们打造3D媒体时代的娱乐与通讯功能。团队在计算机视觉、图形学、多媒体、高性能计算等领域有着丰富的积累和经验。Owlii致力于为人们打造3D媒体时代的娱乐与通讯功能。Owlii在2017年1月CES首次亮相，在2017年8月SIGGRAPH大会上首次展示了跨大洋的实时全息传送技术。Owlii 在数月前完成了数百万美元 Pre-A 轮融资，投资方为真格基金、顺为资本、美国中经合集团、动域资本。

（注：图为北京到洛杉矶实时Demo）

(注：视频 为实时演示Demo）

(注：视频为手机应用Demo展示）