TOF(Time Of Flight)+模型匹配,ThisVR想让手势识别低成本小型化

Yuri·2016-06-12 17:52
手势识别是不是迟早会加到手机上?

VR/AR时代,自然交互变得很重要,人最基本的手势交互又开始被重视。LeapMotion的Orion已经可以比较好的追踪双手,Usens,微动等在做手势识别的公司最近也获得了不少的融资。微软的Hololens也使用了手势作为基本的交互联想刚发布的基于Google Tango的手机,为移动端手势识别打下了基础。thisVR也在做手势识别,不过技术路线与Leap Motion等不同,更小更便宜。

ThisVR做手势识别,硬件用的是基于TOF的深度摄像头制作的传感器,其中的TOF模组与联想的Tango手机来自相同的供应商,正在研发的第三代硬件可以做到60Hz采样率、110°可视角,精度在1cm左右。软件上,则是根据深度摄像头发来的深度图,基于深度学习,训练深度图中的手势和人实际的手势进行匹配。thisVR创始人房文新表示,目前几家手势识别公司中,只有ThisVR采用的是基于TOF和模型匹配进行手势识别,好处是未来可以小型化,嵌入手机中。

微信截图_20160612151216.png

之所以选择TOF传感器,主要是可以小型化。房文新介绍,目前能够生产深度图的主要有三种方案,双目摄像头、结构光和TOF。Leap Motion等基于双目摄像头,精度高,但是主要问题是体积较大,难以应用到移动端,如手机和VR头显上。结构光的方案则抗光性差,而且不能在近距离使用。TOF虽然目前精度在厘米级,比Leap Motion等毫米级要低,但目前的设备已经比Leap Motion等更小也更便宜,未来可以做到更小,能够植入移动端。

算法方面主要考虑到硬件运算能力。目前主流的识别手的关节点进行追踪是不同的思路,TOF的深度图分辨率只有220*172,比其它两种低不少,处理起来对硬件需求偏低。ThisVR的设备目前还只能链接PC运行,最低的显卡要求是GTX 950M水平,房文新表示下一代希望达到高通骁龙820的水平。

微信截图_20160612152345.png(图片由thisVR提供)

ThisVR目前设备的第二代产品工程样机已经制作出来,第三代还在开发中,算法方面第三代算法已经研发完成,目前跑在第二代设备上,在30HZ的采样率下,追踪和识别的准确率和精度都不高,离实用还有距离。房文新表示到第三代硬件60HZ采样率下,会好很多。

ThisVR创始人房文新之前在360牵头智能相机项目,团队其它成员来自中国电力研究院,StepVR等。团队目前有近10人,此前曾获得一轮天使投资,目前在进行Pre-A轮融资。

+1
0

好文章,需要你的鼓励

参与评论
评论千万条,友善第一条
后参与讨论
提交评论0/1000

下一篇

具备影片的跨界合作、资源整合、授权经营能力的全案营销公司会更具有竞争优势。

2016-06-12

36氪APP让一部分人先看到未来
36氪
鲸准
氪空间

推送和解读前沿、有料的科技创投资讯

一级市场金融信息和系统服务提供商

聚焦全球优秀创业者,项目融资率接近97%,领跑行业