vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

要说当下国内乃至全球最火的Android手机,那么一定非vivo NEX莫属。凭借以升降式前置摄像头为首的一系列“黑科技”,该机成为了目前最接近全面屏“终极形态”的旗舰之一。

从vivo官方公布的数据来看,6月12日发布后,其官网的预售4小时便宣告售罄。天猫平台618期间,更是创下了4000~5000元价位Android手机的销量及销售额双料冠军,用户对它的热情与肯定可见一斑。

而就在昨天,也就是距离NEX推出仅仅半个月,vivo又在MWCS18(2018世界移动大会-上海)现场发布了TOF 3D超感应技术,不但顺理成章的霸屏成为首日焦点,也再次引发了全行业的关注。

受vivo邀请,我们有幸成为了首批体验到该技术的媒体,尽管还处于研发与工程模型阶段,不过已经有很多亮点可以与大家分享。

说到TOF,你可能会觉得眼熟。没错,它并不是什么新的“黑科技”。前不久发布的小米8,甚至前年上市的iPhone 7,包括微软Kinect二代等等设备,都搭载了该技术。不过,以前的TOF仅用作距离感应器,是单点的(仅指手机端)。

简单来说TOF就是Time of Flight(飞行时间)的缩写,它是一项深度摄像技术。其工作原理是发射器发出经调制的近红外光,遇到人或物体后反射,传感器在接收到红外光信息后,计算红外光线发射和反射的时间差,从而形成立体视觉。

那么,vivo的突破在哪儿呢?

我们都知道在2D信息时代,由于缺乏更多的深度信息读取,智能手机在应用场景以及安全性等方面,很难取得进一步的突破,只有向3D视觉领域发展,才能突破目前成像技术的局限。

随着3D技术的日臻成熟以及终端运算能力的大幅提升,3D成像技术结合AI,将对影像、人机交互、AR等领域,带来革命性的提升。这是技术发展的必然趋势,也是源自用户需求的驱动。

目前行业内,3D视觉领域主流的解决方案就是结构光和TOF技术,前者的代表是大家非常熟悉的iPhone X,存在有效深度信息少、baseline(基线)大、工作距离短、量产难度大等挑战

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

为了探索新的人机交互方式以及智能终端更多的应用场景,vivo最终选择采用TOF 3D超感应技术,它具备有效深度信息多、工作距离远、结构布局灵活、应用场景丰富等优势,可以满足用户对于立体视觉体验的更多期待。

我们会后采访vivo软件部门负责人刘旭东时,他表示,其实从2014年开始,vivo一直在研究通过双摄像头方案做手势操作相关的应用,2015、2016年又一直在研究有哪些东西可以给用户带来在视觉方面的更好体验。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

到了2017年3月,vivo看到了主流的结构光和TOF技术都有机会做出好的应用,所以持续对这两个技术做了研究和追踪,直到12月最终确定做TOF技术方向。

相对于市面上已经存在的TOF及结构光技术,vivo TOF 3D超感应技术的强大主要体现在4个方面

1. 目前行业最多的有效深度信息点

TOF 3D超感应技术的有效深度信息点多达30万,是结构光技术的10倍,细节更精确,图像品质更好。当用户进行解锁、支付等涉及安全的操作时,更精细的深度成像,极大提升了人脸识别的安全性,做到了更高级别的保护。

目前整个行业大多数的TOF技术的应用都停留在将其用作距离传感器,其光源信息是单点的。而vivo TOF 3D超感应技术之所以称之为TOF 3D主要是因为其采用的是“面光”,两者在精准度、安全性甚至是技术难度方面都不是一个级别的。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

除了生物识别之外,TOF 3D超感应技术,还能带来很多功能上的全新体验。比如用户在拍照时,精细的深度信息可以为AI美颜提供更立体的数据模型,使得打光、虚化、着色等局部调整更加精准,让拍照美得恰到好处。

2. 工作距离长

TOF 3D超感应技术的工作距离可达3米,是结构光技术的3倍,使应用场景进一步被拓展。例如通过TOF 3D超感应技术进行3D拍照,机主就可以通过手机轻松建立人体模型、线上试穿,快速、方便的淘到心仪好货,避免被“卖家秀”套路。

3. 行业顶级硬件和算法

TOF 3D超感应技术搭载了行业顶级CCD Sensor和低功耗高性能的定制化AFE芯片,在运行中结合AI辅以深度图优化算法和高性能3D建模算法,为出色的3D精细成像效果提供了保证。

▲ 视频

我现场体验了TOF 3D超感应技术的建模速度,大概流程和录入2D人脸数据差不多,只是多了分别向左和向右转头90°的操作,整体时长30秒左右,即可建立一个几乎与本人一模一样的3D模型

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

并且这个模型支持各种“PS”操作,还可以输出到电脑等其他计算设备,甚至通过3D打印机打印出来,是不是瞬间想到了很多玩法与商机?

▲ 视频

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

4. 结构布局更加灵活

vivo TOF摄像头的体积相比结构光的组件更加小巧,在产品ID设计时,机身无需为立体视觉的实现,付出更宽的“刘海”及更大的机身内部空间,实现了功能增强与外观设计的兼顾。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

我们在现场体验的具备TOF 3D超感应技术的工程机,TOF摄像头模组看上去并不算小,不过它还是基于X20的模具来做的,因为那时vivo就开始了该技术的研究,量产时应该会控制到一个更合理的体积。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

并且,刘旭东告诉我们,vivo正在积极研究TOF 3D超感应技术如何与零界全面屏共存,这是一个重点努力的方向,如果成型,无疑又为极致的全面屏形态,扫清了一大障碍。

说了这么多,TOF 3D超感应技术究竟能为vivo手机,带来哪些改变?

从理论上来说,人眼的立体视觉是人类能感受世界的最佳体验,TOF 3D超感应技术就是为了让手机可以像人眼一样感受立体世界。尤其是它与AI结合,我们就能延展出更多想象空间,令虚拟与现实更好的融合,让立体视觉服务生活的方方面面。

举一个最近比较火的例子——MR(Mixed Reality)混合现实体感游戏,这就是TOF 3D超感应技术重点推进的应用领域。类似电影《头号玩家》中的虚实结合效果,利用手机将万物建模,再将模型与其他虚拟或现实场景融合,玩家在这样的“新世界”中,就可以兼顾沉浸式视觉体验与体感操作的乐趣。

▲ 视频

关于这个部分,vivo也进行了相关演示,TOF 3D超感应技术工程机与现场大屏进行连接,系统扫描并建立用户模型后,虚拟形象便立即生成到酷跑和滑雪游戏中,

整个过程与体验几乎与Xbox+Kinect相当,但所用到设备却只有一台手机

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

这让我联想到最近一个风靡抖音圈的切方块体感互动小游戏,很显然,大家对于体感游戏浓厚的兴趣,给vivo带来了一些启迪。vivo也表示,接下来将和游戏厂商一起,借助TOF 3D超感应技术提供强大的立体视觉,推出创意十足的游戏。

当然,类似应用还会出现在更加专业的领域,例如教育、医疗以及办公。很快,我们开会时不仅能听到对方的声音,还能看到影像,并真切的感受到TA就在你的身边。比如上名师英语课时,现在可能需要很长的路程周折。但通过vivo TOF 3D超感应技术,只需要打开手机,老师就好像真的坐在你对面。

发布会上vivo表示,已经正式开启了“3D视觉开发者计划”,将实现从底层TOF器件和深度信息接口至上层功能应用的全渠道覆盖,期间将邀请行业开发者、服务供应商以及用户一起探索,并不断提升3D视觉的性能表现及体验。

现阶段,vivo率先与微信进行深度技术合作,采用TOF 3D超感应技术方案并经过前期的工程调试和算法调优,已经可以成功支持微信人脸识别支付。这使得vivo不仅成为了国内率先支持微信指纹支付、首家支持微信屏幕指纹支付的手机厂商,也是国内首家支持微信人脸支付的品牌。

vivo软件技术专家臧亚奎会后接受我们采访时也表示,vivoTOF 3D 超感应技术已经达到了可量产的状态,用户将很快可以体验到搭载该技术的手机带来的全新体验。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

从2018年初全球首个正式商用的屏幕指纹技术,到极具创新的零界全面屏手机vivo NEX,再到此次MWCS18大会上展出的领先行业的TOF 3D超感应技术。vivo正在加速科技创新的步伐,通过技术创新驱动产品升级,向行业展示其在创新道路上的极致追求。

实际上,不仅仅是今年,vivo对于科技创新的追求从未停止,其“黑科技”发展史可以追溯到2012年。那时,vivo手机主打音质,发布了全球首款配备独立HiFi芯片的智能手机——vivo X1,开启了一个属于智能手机的HiFi新时代。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

紧接着的2013年,为了给用户带来更好的视觉享受,vivo又发布了全球首款搭载2K屏的影音旗舰——Xplay3S,重新定义了智能手机的视觉感官体验。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

2014年,手机市场迎来了一场轻薄大战,但随着vivo X5Max的发布,4.75mm的厚度便刷新了最薄手机记录,至今这款手机依然是全球最薄的智能手机。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

两年后,智能手机拍照大战一触即发,“后发制人”的vivo X9主打的前置双摄像头设计,并且还配备了柔光灯等新鲜特性,激发了智能手机行业的自拍新热潮。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

2017年,全面屏时代带来,在众多全面屏手机都采用正面实体指纹或后置指纹的背景下,vivo开创性的全球首发了正面隐形屏下指纹技术,并且在vivo X20 Plus屏幕指纹版上成功实现量产,成为了当时美感与体验最佳的解决方案。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

而今年,更是成为了vivo的技术爆发年,APEX概念机一经亮相,其98%的惊人屏占比瞬间在行业内引起热议。同时,半屏指纹的出现,也再次让vivo在业内独领风骚。

现在,vivo已经把APEX概念机成功实现了量产,NEX从科幻走进现实,在开创全面屏“终极形态”的同时,其升降式前置摄像头也颠覆了手机的设计语言。

vivo TOF 3D超感应技术抢先体验!手机就能玩深度建模、体感游戏

这一次次的技术创新与突破,都源于vivo多年来对研发的持续投入。还记得去年的一次高层媒体沟通会上,vivo就表示,还将持续加大研发投入,在国内外成立7个研发中心,国内包括深圳、东莞长安、南京、杭州和北京。而国外将在美国硅谷和圣地亚哥分设两个研发中心。从这种部署看来,vivo将由原来的音乐和拍照的单点技术突破,进化成从智能手机的整体技术创新全面推进。

2017年,vivo在北京建立的5G研究院已经启动运营,在之前多年的通信技术、人才积累基础上,汇聚了大量行业资深人士及移动研究院专家。

此外,vivo在拍照技术的基础性研究上进展也非常快,在杭州,拍照研究院的团队已经建立,而占地3800㎡的研究中心也即将落成,将在底层算法方面,为vivo产品的拍照功能提供支持。

而在美国圣地亚哥等地的拍照技术研究院,也搭建起了基础团队,他们将在底层技术、专利储备方面发力……

在众多厂商、供应商追随苹果之时,vivo选择结构光之外的另一条道路极具风险,但也体现了vivo不盲目跟随,具备开拓精神。可以预见,这次TOF 3D超感应技术的发布,结合AI,对vivo乃至整个行业,将是又一次从智能终端向智慧终端的升级,也是科技赋能生活的又一次突破。我们也非常期待该技术搭载到很快到来的vivo量产机后的表现,会是什么时候?也许就在秋天。


分享到:


相關文章: