专业云开全站app官方网站软启动器及成套控制设备生产厂家

云开全站app官方网站软启动器维修

云开官网下载官方入口

高通郭鹏:推进HMD加速器计划让XR成为每个人的现实

时间: 2024-04-15 22:47:04 |   作者: 云开官网下载官方入口

  在5月17日,由青亭网主办的2019第三届全球虚拟现实产业创新者峰会”上,高通XR业务中国区负责人郭鹏带来《让XR成为每个人的现实》演讲主题,他在高通是如何利用5G技术上的支持下一代沉浸式移动计算的发展方面做出相关分享。

  郭鹏本次分享主要是针对硬件和软硬底层方面,高通作为最上游芯片公司的一些成果。移动XR现在正迎来特别大的机遇,未来是一个黑科技的移动办公,能够正常的看到在这个图里面,不再需要一个笨重的电脑,用手机接一个特别轻薄的眼镜,就可以使屏幕变得很大、操作非常简便。这样我们大家可以实现多屏的操作,可以任意切换不同的任务,能轻松实现头部自由的移动,可以看到很大的视野,这是未来AR、VR在办公上一个很重要的应用。

  回顾过去几年的VR、AR的兴起,还有很长的路需要走,但是回望过去可以看到产品越做越好、越做越轻薄。过去五年的产品现在看起来很笨重,比如一个大的iPad装一个摄像头来进行定位,比如手机插到VR盒子里面来体验VR。这些体验不是太好,现在有了更好的设备,有了很轻薄的移动XR的设备,还有VR的一体机,在未来可以看到产品越做越小。

  有没有可能未来手机会被替代呢?这是一个非常大胆的问题。如果回望十年前或者20年前,我们在用砖头那么大的大哥大时代,是一个砖头机。那时候不会想到未来五年十年。有很轻薄的功能手机出现,我们使用轻薄的功能手机,还使用硬键盘打字的时候,也想象不到现在的手机是什么样子,当然现在依然想象不到未来的智能手机是什么样子。我们只知道它会加速地走下去。

  未来的眼镜是什么样子呢?根据我们掌握的经验和数据看看未来的眼镜有什么东西。我们想象它有很多传感器,因为越来越多的设备需要自身去感知在环境中的位置,感知周边有什么东西。这里面有一大部分传感器就是摄像头,它可以看到外界当然还有听觉和其他传感器,让你的设备更智能的感知外界的环境。你还需要无时无刻的连接,原来是WiFi,然后是4G,现在5G也来了。我们需要有很棒的显示设备,现在的显示设备还是重量比较沉、体积比较大,未来可以把AR显示从目前的反射式光学变成衍射式,所有这些都在推动产业往前发展。

  具体到AR和VR应用,比如AR可以共享和工作,多人游戏,社交也非常重要。共享式办公有了初步的概念,未来办公可以身临其境,同一套系统通过云端进行实时办公。还有虚拟的购物体验,在一个物理世界上没有图像的地方,我们可以看到一个虚拟的东西,虚拟试穿衣服将是一个非常炫酷的购物体验。行业应用会有远程的监控和指导,这是工业应用上一些AR客户试图去发觉更大的机遇。

  高通作为这个产业链里面的一个角色,站在产业链最上游来提供芯片,我们提供的芯片解决方案特别适合移动XR。我们每年都推出一款骁龙旗舰平台,这款平台是面向手机行业最顶级的旗舰移动平台,同时也能很好的满足XR设备的需求,去年推出了一款专门针对XR的AR、VR的芯片XR1。

  芯片作为一个硬件还是不够的,还需要有很多的软件和算法,比如SDK、API,同时把一些业界领先的技术合作伙伴,比如手势、手柄、眼球追踪,把算法集成到整体解决方案中去。我们的目标是希望算法共享设备上的摄像头、传感器、处理器,把软件放到上面就可以很好的跑起来。这样能达到一个很好的效果,可以达到一个非常好的性能功耗比,可以在很有限的电源功耗下面,达到一个非常好的效能效果。

  同时我们还推出了HAP,即HMD加速器计划,我们把业界合作伙伴请过来,比如你的光学显示非常好,我们把你邀请过来,验证零部件后放到里面去。比如其他的手势或者眼球追踪方案比较好的话,也会加入进来。我们希望业界非常好的伙伴,把你们的技术拿过来,跟我们的芯片做底层整合,从而把方案推给客户。

  最后回到终端,这一页图上是VR设备,现在基于骁龙处理器量产的设备太多,没有办法一一列举。这是八款设备,这里面有很多中国的厂商,比如Pico、爱奇艺、大朋、小米,都是国内非常大的OEM。除了它们之外,还有全球的Oculus,一直在这个领域耕耘,他们基于骁龙820、835发布了数款产品。

  除了VR之外,特别火的是AR。AR方面我们有很多产品开始陆续量产和上市。在过去我们有很多好的合作伙伴,比如影创,这是国内的合作伙伴,所以国内的AR产业越来越好。除此之外还有国外AR的佼佼者,比如Magic Leap、微软,会有越来越多的产品面向市场,给你们提供特别好的体验,所有的产品我列的都是基于骁龙处理器实现的。

  除了硬件之外,我们对软件平台的适配也是多元化的。因为VR有很多年业界合作经验,在VR上我们支持谷歌VR平台、HTC VIVE VR平台。AR平台方面,我们在微软AR平台上也是完美适配的。还有国内的其它平台,也有很多合作伙伴跟我们进行合作。

  就在前天国内一家企业商汤AI大会上,刚刚发布商汤Sense AR 2.0平台,上面着重提到了对眼镜侧的完美适配,也是跟高通的骁龙底层做了完美的适配,可以给到统一的SDK给到开发者。所以在AR和VR非常注重和软件平台的适配,打造一个整合开放的生态,提供给开发者和用户。目前为止量产上市超过了20多款的AR或VR的一体机或者分体机,正在研发的也有20多款,后面会看到更好设备的面世。

  5G到来以后,我们的手机网络连接速度延迟将变得非常低,我们可以用5G手机做什么呢?高通在想一个方案,通过手机和Type C线缆连到特别轻薄的眼镜,能轻松实现AR或者VR的体验。它的好处是每个人都有一个手机,有手机的算力,可以使用手机电池。你只需要实现一个很轻薄的眼镜,这个眼镜可能会搭载一些摄像头帮你感知外界,所有的算力是在手机侧完成的,这样能够达到一个轻薄、省电的效果。目前在推的idea基于最新的骁龙855手机做适配,可以通过线缆去连接,只需要眼镜上有摄像头,并可同时适配AR或VR,不同形态的眼镜都可以兼容,我们认为未来的5G手机会有这样的形态发生。

  同时也会推出我们的参考设计,联合ODM合作伙伴和技术合作伙伴,打造一个完整的整体解决方案。

  最后聊一下PC VR和移动VR体系的整合。PC VR和移动VR有各自的优势和缺点,PC VR有很好的性能,渲染非常强大。当然它的功耗、移动性、便携性、安装便携性比较差。移动VR无疑它使用最方便,拿起来就可以用。但是由于功耗的限制,必须考虑到耗电的问题,所以移动VR上性能没有很好的方法达到最高。怎么把两者具备起来?这个idea跟华为朱先生讲的非常像,我们通过一个远程渲染的模式。

  我们具体的实现方案是:PC和游戏主机负责画面渲染,通过强大的算力把渲染的画面细密程度做到极致。再通过压缩数据流的形式,通过高速传输、低延迟把数据传到轻量的VR头显,同时头显再解码。这样的好处可以同时兼顾PC VR和移动VR的优点。双模使用,既可以作为VR一体机来使用,也可以连接PC,用于高画质游戏使用。

  Inside-Out能轻松实现追踪器无线化,无线数据传输彻底去掉线缆,更低的BOM和简单快捷的安装,这些都是VR、AR一个很大的优势。我们现在积极和国内厂商开发这样的产品,马上会看到基于骁龙的无线PC VR的一体机面向市场。

  最后如果把PC VR移到云端,这就是华为朱先生讲的离线G传输到头显里面,对于消费者来讲更进一步,还节省硬件成本。

  最后讲一下愿景,如果说过去30年高通始终致力于连接人和人,现在通过我们的领导力,将我们的技术推广到每一个领域。未来30年当5G也来,IoT是连接万物的时代,相信通过我们的技术将人与人、人与物更好地连接,为社会带来新的价值。