【南京眼】眸曼科技:用AI+AR做用户的美丽管家

王福慈@36氪江苏·2019-10-16 17:31
用户期待消费的不是好看的化妆品,也不是昂贵的医美服务,而是放在自己脸上,让自己变得好看的产品与服务。

随着AI技术赋能,在万物皆可数据化的今天,深度挖掘面部数据的商业价值正方兴未艾。围绕人脸识别为核心展开的人工智能(AI)和增强现实(AR)技术,包括刷脸支付、智慧安防在内,已经是被巨头垄断厮杀一片的红海。但在美业、时尚行业这类用户重视体验和效果预知的颜值经济领域,上述技术的运用尚处在拓荒阶段。近日,36氪江苏采访了眸曼科技CEO张晨溪,了解眸曼科技是如何运用AI、AR以及计算机视觉技术,来提升颜值经济用户体验的。

众所周知,颜值经济正在催生着巨大的商业机会。数据显示,在过去几年中,中国美业市场以15%的平均年增速增长,2018全年达1.29万亿元,体量巨大、增量可观。中国医美市场规模已经超过2200亿,正式超过巴西,成为仅次于美国的全球医美第二大国,而且,未来五年仍将保持20%以上的年增速。

在这里,我们需要明确一个重要概念,我们讨论的颜值经济到底边界在哪儿?张晨溪认为,颜值经济,或曰美业是一个泛在概念,它不仅仅包括狭义的医疗美容,所有使人变美的服务和产品都可以归纳到这个范畴中,包括医疗美容、服饰美妆、美发美甲在内的领域都属于颜值经济范畴。

美业核心痛点:“货不对板”的潜在风险

从C端消费者来看,爱美是人的天性,尤其对于女性消费群体而言更是如此。用户期待消费的不是好看的化妆品,也不是昂贵的医美服务,而是放在自己脸上,让自己变得好看的产品与服务。实际情况却是,绝大多数人不是时尚达人也非医美专家,对“怎样变美”这件事缺乏专业经验,不知道什么样的美是适合自己的,不会选择,不懂搭配。

一方面是消费者经验的欠缺,另一方面是令人担忧的现状。因为整形手术的不可逆性,出现效果差强人意的局面也无力回天。巨大的需求催生着野蛮生长,而与此同时行业规范落后于行业的扩张速度,医美机构良莠不齐的现状更增加了手术效果不理想的潜在风险;美妆的线下专柜试妆,也无法避免卫生隐忧。

C端用户担心“买家秀”与“卖家秀”之间的巨大鸿沟,重视效果预览。同样对于美业领域的B端机构而言,在以客户体验为中心的商业时代,激发消费者兴趣不仅要依靠服务和产品,还要尽可能为消费者提供更贴近真实效果的体验服务。而提供更加真实、准确的效果预览,需要依托于AI和AR技术。这样的技术要求显然是某一化妆品品牌、某一医美机构难以胜任的。

“C端用户重视效果预呈现,B端用户难以实现效果预呈现,眸曼科技所要解决的就是这个问题”,张晨溪总结到,“聚焦于变美可视化,眸曼利用3D人脸建模、AI五官分析、AR效果展示帮助用户感知方案效果。用户不需再凭空脑补,每个人都可以拥有一位私人颜值形象设计师”。”

技术层面,眸曼利用建模—分析—重塑的三重环节,实现医美手术效果的3D模拟可视化:

第一步,人脸数据3D化。通过手机摄像头采集人脸图像数据,利用计算机视觉技术进行结构化3D重建。不同于新氧、更美等APP的2D照片AI分析功能,眸曼可利用手机摄像头生成360°的3D人脸模型,精度媲美专业3D摄像头,;

第二步,结构化的人脸3D模型,可以精细地定位到人脸的不同部位,利用AI对用户的三庭五眼、五官比例进行分析测算,基于量化数据呈现出更加精准和个性化的变美效果;

第三步,通过AI人脸液化技术进行3D人脸五官重塑,这一核心技术根据解剖学和人体结构学原理,可以真实模拟上百种整形微整形手术的效果,构成了整形效果模拟的关键。

“变美是一件综合的事情,美丽是一种整体感受,变美的手段不仅仅是医美,还涉及到美妆、美发、穿搭等”,张晨溪介绍到,“眸曼的出发点是做用户颜值的一站式解决方案提供商”。

基于这种考虑,除了医美手术的效果可视化,眸曼科技还研发了3D AR试穿戴技术,将美妆、美发、配饰的AR效果叠加在真实的3D人脸模型上。AR效果素材池则由自研系统半自动生成,商品素材得以规模化扩展。基于物理的渲染技术和妆容转移算法的优化,可以让效果呈现更加实时、逼真。

Biu Me : AI颜值设计、体验和分享平台

上述核心技术,在眸曼近期即将上线的3D相机产品Biu Me中得到应用。 Biu Me APP具备三个功能:

效果展示。通过3D人脸扫描建模和AR呈现变美的效果,展示效果涵盖医美、美妆、发型、配饰等模拟效果。

在模拟过程中,系统可以运用AI捕捉和分析用户的面部特征,同时结合当下的流行趋势和用户偏好,为用户推荐适合自己的变美方案。用户也可以像使用ZEPETO一样进行捏脸、服饰搭配,通过选择不同的微整形项目、妆容、发型、配饰,DIY出自己的理想形象,在娱乐的过程中学会进行形象设计。“变美一定是不同元素的组合和搭配”。

随着用户量的提升,根据用户的点赞、收藏、停留、购买等行为数据,可以分析出用户喜爱的风格和适合的产品服务,进而训练出更加智能的AI变美推荐系统。

区分享。Biu Me是一个人人都可以展示形象设计和创意的平台。当用户浏览到自己喜欢的妆容效果时,可以一键应用到自己的3D脸上;用户可以与社区中的医美专家和时尚达人互动交流,让专业人士为自己打造出一套定制化的美颜方案,并且在自己的3D脸上预览效果;美妆KOL可以通过短视频来进行化妆教学,妆容可以同时转移到用户3D脸上,实现卖家秀与买家秀的结合;用户也可以分享自己体验的医美服务的经历,在社区内进行拔草和种草。

• 产品服务。Biu Me所有的3D美颜素材都取材于美业场景真实产品和服务。例如,由医美专家对设计工具进行修正和反馈,眸曼研发的3D效果模拟系统能够真实呈现术后效果。未来,用户可以进一步通过Biu Me的合作机构进行医美项目消费,Biu Me则可凭借为医美机构线下导流获取提成;用户也可以直接通过Biu Me的合作商家线上购买相应的美妆产品,Biu Me则凭借为电商导流获取提成。这些也构成了Biu Me 接下来的商业闭环和盈利来源。

未来,年轻人对美的追求一定会越来越个性化、多元化,千篇一律的流水线审美会被抛弃,适合自己的最自然的效果才是最美的。在这个过程中,AI和AR是找到和看到变美最优解的工具支撑。

团队方面,眸曼科技联合创始人兼CEO张晨溪创业前曾就职于硅谷Adobe公司总部,担任计算机科学家,联合创始人兼CTO叶茂曾就职于苹果、微软研究院,后加入博世(Bosch)北美研究院担任视觉计算组和机器人组负责人。

南京AI产业聚集高地:南京新港高新园

正如张晨溪所言,两位拥有10年海外研发经验的创始人,去年回国创业后选择落户南京、入驻新港高新园,看重的正是新港AI产业集聚、AI人才汇聚、AI政策支持的优势,“新港高新园不仅有旷视、地平线等大批知名的AI独角兽企业,还有南京大学人工智能创新研究院等科研单位,眸曼会与园区科研机构和AI企业进行合作,将南京公司培育成眸曼重点建设的研发中心”,张晨溪表示。

+1
1

好文章,需要你的鼓励

参与评论
评论千万条,友善第一条
后参与讨论
提交评论0/1000
36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业