高通5G+XR技术赋能工体元宇宙 打造数实融合新体验
7月6日,在工体元宇宙GTVerse发布会上,中赫集团携手中国移动、高通公司共同发布了5G无界XR赛事体验方案,共同探索5G+XR在智慧体育场景的全新应用,现场还展出了多种5G+XR相关的前沿技术展示。高通公司中国区研发负责人徐晧博士发表了主题演讲,揭示5G+XR如何赋能“数实融合”的全新赛事体验。
智慧工体,让精彩赛事迈进元宇宙
北京工人体育场改造复建项目(下面简称新工体)将于2022年底正式完工,作为北京的地标性建筑,新工体拥有38.5万总建筑面积和6.8万个座位,将继续承载国内外重大赛事、展会和演唱会等举办工作。不仅如此,这次打造的工体元宇宙,还将基于庞大的体育场客流和球迷、歌迷私域流量,结合5G和XR,实现实体世界与虚拟世界、数字世界的融合。例如用户可以邀请合作伙伴和家人好友,在虚拟赛场中一起看球,无论身处何方,也能在工体元宇宙中与现场球迷一起,共同感受现场气氛,为实时的精彩表现而欢呼。
要实现这样的体验,需要5G和XR技术的结合。XR包括AR(增强现实)、VR(虚拟现实)和MR(混合现实),通过头显、渲染和空间定位等技术,让我们各个感官一起进入数字世界。XR头显需要支持超高清分辨率、实时渲染、超低时延,还需要解决发热、续航等问题,这并不是一件简单的事情。
通过5G的超大带宽、超低时延和高可靠性等特性,可以解决XR的诸多痛点:超大带宽可以允许我们把大多数的AI计算和大规模渲染放在云端或者边缘云,解决XR头显发热、续航的问题;5G超低时延支持的空间定位、六自由度姿势追踪、以及眼球跟踪和手势识别等,可以让用户从动作到渲染再到显示的整个过程的时延大大降低,减少眩晕感;5G的高可靠性也能提供大规模的下载和上传能力,使得用户即使身处数万人聚集的新工体现场,也能获得高速顺畅的5G体验。
此次发布的“5G无界XR赛事体验方案”,将XR、5G和边缘云计算三项元宇宙核心技术结合起来,有望将全景自由视角赛事直播、沉浸式观赛等创新体育应用带给用户,让精彩赛事迈进元宇宙。其中,工体元宇宙具备的超级云网,成为了支撑更多创新应用落地的强大平台。工体超级“局域公网”不仅支持在公有网络、5G专网、毫米波以及Sub-6GHz网络下的数据传输,同时也支持边缘云架构。XR头显可以通过5G网络连接至工体支持的边缘云,依托支持分离渲染的工体元宇宙系统架构,实现虚拟看球、虚拟演唱会、虚拟展会等诸多数实融合场景的实现,打破空间限制,让全球朋友和合作伙伴都有深度参加工体元宇宙的能力。
前沿技术展示,展望创新应用前景
在发布会现场,高通和众多合作伙伴还展示了不少前沿技术。如高通和中国移动展示了无界XR(Boundless XR)技术,在分离渲染架构下,XR用户能够利用5G来协同边缘云侧进行实时渲染,同时结合XR终端侧的本地优化渲染来提供低时延沉浸式无界XR体验。这个方案基于爱奇艺奇遇Dream Pro VR一体机(搭载骁龙XR2平台)、小米智能手机(搭载骁龙移动平台)、中国移动研究院联合世炬、共进研制的5G家庭小基站(基于高通FSM100 5G RAN平台)、当红齐天提供的沉浸式互动内容并基于SoReal VR分布式内容平台管理共同完成。
银河威尔科技公司还展示了自主研发的三维交互式直播产品——GVR“第二现场”,将远端训练基地的训练实况以身临其境的画面和炫酷的AR特效,实时同步到发布会现场的爱奇艺奇遇Dream Pro VR一体机里面。这里面运用到了北京移动的5G切片网络和搭载骁龙5G调制解调器及射频系统的5G CPE设备。
梦想绽放用奇遇Dream Pro VR一体机展示了基于计算机视觉技术的“追光”6DoF交互系统。该系统可实现头部和手部双6DoF空间体感定位,手柄定位精度可达毫米级别。它搭载骁龙XR2平台,配备8GB大运存、4K超高显示屏。
通过多项前沿技术展示,我们可以一览5G+XR的创新应用场景。无界XR技术支持的
更低功耗、更好画质和续航表现,让用户在多场景下畅享栩栩如生的视觉效果和无拘无束的XR体验;“第二现场”展现了工体元宇宙中的另一种可能,让球迷与球员再无距离隔阂,同时未来人们还可以通过穿戴式头盔,跨越时空的限制,用数字化身的方式体验亲临现场观看比赛,欣赏盛大的虚拟烟花表演;“追光”6DoF交互系统则展现了人与数字世界更多的触觉交融,让数实融合更加实用。
携手生态创新,共迎数实融合新机遇
从工体元宇宙到诸多新技术的展现,都出现了高通的身影。其实多年以来,高通从解决方案到生态投资,都在身体力行,为XR的发展推动而不断努力。解决方案方面,高通目前已经推出了两代XR平台:全球首款XR专用平台——骁龙XR1平台以及全球首个5G XR平台——骁龙XR2平台,拥有包括meta Quest、联想、HTC VIVE等多家合作伙伴,全球已经有超过50款基于以上平台研发的VR/AR终端发布。
生态投资方面,高通创投成立了XR产业投资联盟,签约投资机构已经超过30家,目标是加速XR领域的创新、规模化及成熟;还连续举办四届“Qualcomm XR创新应用挑战赛”,与国内各省市政府联合成立多家XR创新中心等等,这一切,都是为了让XR生态能更快更好地茁壮成长。
毫无疑问,高通正在结合中国乃至全球的生态伙伴力量,加速推动5G+XR领域的创新和成熟。可以想象的是,在数实融合体验开始普及后,也许数字工厂的研发、生产和质检的效率会得到不少提升;学生在数字课堂可以与恐龙、星球面对面接触,寓教于乐;人们购物时可以实时在家里预览、体验同等大小的虚拟商品,成交率更高……5G+XR领域的创新和成熟,在改变人们娱乐、学习和购物体验的同时,也将驱动新一轮产业变革,为人们打造更沉浸、更智能、更互联的数实融合未来。