高通郭鹏:XR是下一代移动计算平台

出处:二牛网 2020-12-25 15:22

   2020年12月23日,由青亭网主办、Pico协办、中国虚拟现实技术与产业创新平台、北京图象图形学学会、AWE Asia、深圳市增强现实技术应用协会、清华经管创业者加速器、创业公社战略支持的“第四届VR/AR产业创新者峰会”正式在北京举行,本次峰会主题是“聚变·共生”。

   大会围绕VR/AR技术在垂直行业的商业应用展开,共探VR/AR在传统行业的应用和案例分享,挖掘探索商业新机遇,共同构建合作新桥梁。


   高通中国区XR业务负责人郭鹏,在本次峰会带来了名为《骁龙助力实现XR的未来》的主题演讲。


高通郭鹏:XR是下一代移动计算平台


   以下是郭鹏的演讲实录:


   谢谢青亭网,我们又见面了,今年真的很不容易。我是高通中国区XR业务负责人郭鹏,刚才大家聊到创业超过5年的这些老兵们,我也想举手,我虽然没有创业,但是我在高通已经有超过5年的时间,专门把时间花在VR/AR,我们称作XR上。


   今天我代表高通从产业的最上游跟大家分享一些观点,像刚才主办方罗贤已经从市场和资本层面给大家阐述了我们VR的一些机会,北航的周主任也带来很多关于数字孪生、数字城市的分享,Pico更多把话题放在怎么样更多的丰富VR游戏内容。今天我作为最上游的代表,我们一起来看一看VR/AR未来的形态,会有一些什么样新的趋势和机会?


   VR虚拟现实、AR增强现实,也许VR/AR在未来有些机会是可以融合的,对于高通来讲,VR/AR的底层是一样的,只是说显示光学,以及一些应用场景不一样而已,但是对于芯片、底层软件、算法来讲,它们都是大同小异的。


   这是一个XR在数字城市当中的一个应用场景,我们用户戴上眼镜在城市里面能够在正确的位置显示出正确的信息,显示给用户,这里面蕴含着巨大的商机。


   如果我们回到几百年前,甚至上千年前,我们人类使用的媒介来传播信息,我们发现无外乎都是小屏幕、二维的平面的东西,但是在未来戴上眼镜之后,我们整个数字媒介就改变了,怎么讲?两层意思:


1、它从一个很小的设备,平面设备变成一个很大的全景视野的一个东西。


2、从一个二维变成一个三维,整个空间都会成为你的桌面。


   所以我们认为未来物理屏幕会消失,整个世界会成为你的屏幕。而这里面最最重要的,除了刚刚有嘉宾提到的数字孪生、数字城市,提前建好模型,让你能够很好的去提供定位和相关信息的推送,但是其实最重要的在设备这一侧,怎么样让设备的空间计算能够很精确的把当前用户的位置计算出来,这个是所有这些虚拟屏幕最重要的环节。


   在整个物理屏幕消失,整个世界成为你的桌面的时候,眼镜就会成为你一个空间的浏览器。我们这里面可以看到,我们日常佩戴眼镜,当拿起一盒药品时,它就能够智能的告诉你,我的服药计划,面对一张银行卡,我可以知道我的信用卡账单。无论我在街头、景区,还是博物馆,我都能在现实世界叠加很多虚拟内容,让这个用户产生用户的价值。这些就是让眼镜成为你空间浏览器,它改变了人与人、人与世界的交互方式,不再像传统的看报纸、看书或者是说看电脑,用鼠标、键盘,或者用触摸的方式跟手机平板交互,它可能颠覆你交互的方式,有可能是语音,可能是你手部的动作,有可能是你手指的动作,有可能是你眼球注视点的动作,都会改变你原来传统输入输出的方式。


   再看看我们跟人类生活非常非常密切的几个行业,一个是计算行业,一个是娱乐多媒体行业,一个是电话行业,这些行业最终部分,大部分,甚至全部的功能在目前都被手机代替了。但是我们坚定的认为,XR是下一代移动计算平台,眼镜很有可能在未来会取代手机的位置,只不过现在不管从技术还是从内容上还没有到达一个非常完美的技术成熟的地步,所以我们可能还需要时间去等待这一天的爆发。


   这是高通作为产业链最上游,我们看到的一些XR设备、终端设备形态的一个发展的路线。今天我们可以看到,在这个画面的最上面,是一体机,在画面的下面是跟手机相连接的这种轻薄型的眼镜,今天我们看到有很多优秀的VR/AR一体机出来,像国内以Pico为代表的Neo为代表的产品,是非常非常优秀的。AR上国际上有微软,还有国内也有一些企业有非常优秀的一体机。在未来随着显示光学、计算能力的发展,我们能看到更多更小轻薄型的VR或者AR的一体机。


   下面,跟手机相连的这个VR/AR眼镜,其实在5G发展的初期,在今天5G继续往前发展的时候,其实已经有一些厂商在积极的推出跟5G智能手机相连接的VR/AR眼镜,它可以借助手机生态,借助5G高速连接,可以将很多计算工作放到手机侧,甚至放到云端。但是在目前这个阶段,我们发现眼镜和手机都是有线的连接,它需要一根线,眼镜只是做一些简单事情,比如说做一些对周边环境的抓取,对数据的显示,其实很多运算的工作量都还需要在手机侧做实现。


   但是未来1-4年之内,我们会发现我们有一个明显的趋势,不管从市场侧还是从技术侧,我们发现有越来越强烈的需求,需要去拿掉这根线,因为毕竟手机跟眼镜的一根线互相连接还是不太方便,所以我们预测在未来几年可能会有产品推向市场,它是由一个眼镜和手机通过无线的连接组成的。这根线可能用的是目前主流的,比如说WiFi 6的技术,它的干扰会比较少,它的延时非常非常低,手机更多是中高端的智能手机。


   有了无线连接,我们发现用户戴起来就会提升很大的层次,他依然通过手机做很多工作,但是眼镜上可能不再像有线连接的眼镜一样,无线连接的眼镜上也会做一些工作,比如说它的空间计算的事情可能会放在眼镜侧去做,比如最后显示的时候,它会降低一些延时优化,视觉上的优化,可以让你的沉浸感更强,这些东西都可能会在眼镜上呈现。它会进一步降低你对手机的依赖,对手机的需求,它会以一个手机配件的形式出现在这个市场。这种产品在未来有可能会创造很多很多的机会。


   再往后走,5-10年,我们认为有可能一体机跟手机相连接的分体式的眼镜可能会逐步的融合到一起,因为到那个时候,随着光学显示以及其他硬件技术进一步发展,我们一体机都能做到跟像手机相连接的眼镜一样这么轻薄,它内置5G甚至这些高速的连接,可以跟手机相连,也可以跟云端相连,这是我们认为眼镜的未来。


   这里有一个视频,是我们对未来应用场景的一些展望,这是一个远端协同合作的应用场景。


   随着远端的3D或者全息建模的技术和眼镜技术的协同发展,我们很容易看到,我们在眼镜里面能全息的去看到一个在远方的我们一个合作伙伴,我们共同工作的同事跟我们一起来协同合作。


   这里面可能用到很多先进的技术,比如说眼球追踪、5G网络、超低时延、空间计算,可能还有一些3D摄像头的建模等技术,这一整套系统是未来搭建一个可以在不同地点协同合作的全息会议场景。


   高通骁龙是目前XR设备主流的选择,在芯片上面,我们推出了XR专门系列的芯片,XR1和XR2,当然也包含之前一些骁龙的800系列的平台,也同时像之前的XR,像骁龙845就是基于我们这个平台做的。上市的设备已经超过了30款,这里面包含了国际上知名的VR/AR大厂,也包括国内一些非常优秀的创业型公司。这里总的看来,我们有VR一体机、AR一体机,还有一些类似于头戴显示的,不带空间计算的我们叫做辅助现实的一些轻薄的眼镜设备,还有跟手机分体式的。


   所以这个层面看,我们发现市场上设备的形态是百花齐放,也许未来可能会在集中几个形态当中脱颖而出。


   XR2是全球首款支持5G的XR平台,它的有很强大的5G的连接性,有很强大的无线连接,包括Wi-Fi的连接,它支持高达7路摄像头,可以让你的设备有很多很多丰富感知的能力,跟踪手的,跟踪周边环境的摄像头,场内跟踪眼球的摄像头,还有一些可以拍照的摄像头,还有的摄像头让你的设备变得非常非常智能。这可能是市面上最高端的VR分辨率,目前市面上能看到的最高端的VR屏幕,也都是我们支持的,因为它还支持最主要的头部的定位,我们手部的定位也在研发当中。还有通过一体机来实现跟PC或者跟5G云端的连接,可以让我们的眼镜能够工作在一个便携式的方式下,但是能够享受到PC或者是基于云端的一个丰富的运营生态和超高质量的画面渲染。


   高通在最上游,我们会直接跟OEM、ODM,也就是我们的设备厂商合作,去打造一款一款VR/AR的设备,一款一款精品,同时我们也会将我们的合作扩展至更多生态链的合作伙伴,比如说我们面对行业企业级的解决方案供应商,我们也有一个叫做XEP,XR企业应用计划,它能够融合国内外很多优秀的行业应用的开发者来一起繁荣这个生态。我们会去联合组件、零部件或者技术的供应商,我们会提前验证他们的零部件或者验证他们的技术,这样的话我们能够推出一个整体的解决方案,同时能够给客户很多很多不同的选择,根据他的喜好上面做加法和减法。我们和全球运营商做紧密的沟通,在运营商推5G的时候,XR是一个很好的例子,我们跟全球运营商推出了手机和眼镜的计划,将运营商的5G手机和眼镜结合起来,一起推向市场。


   最后再提一点,我们无界XR计划。我们做无界XR最根本的原因是基于骁龙设备,一定是最轻薄、最轻便、便携性最高的,但是由于在眼镜上,我们要对功耗做极致的管控,我们不可能在一体机上把处理能力提升的太高,所以我们希望说用到一体机的便携性,同时又要利用到网络或者PC端的高计算能力,所以我们产生了这么一个无界XR的概念,我们通过头显做一些低延时算法的处理,同时我们将算法的一些结构,通过5G传输到PC或者云端,通过云端强大的渲染能力,将渲染好的能力,通过高速网络传输到我们眼镜侧做显示,它能够让用户享受到VR/AR一体机的便利性,同时也能够让他们享受到高质量,甚至是5G云端一些更高AI的一些服务。


   我们把5G、AI、XR共同结合起来,把产品推向面对消费者的娱乐、视频服务、教育、培训、文旅行业,甚至推向纯工业应用,我们希望能够通过5G、AI和XR的结合能够让大家有一个更沉浸、更互联的体验。