互联网资讯 · 2023年11月22日 0

新一代人机交互产品AR Studio发布

Rokid今天推出了其消费级的个人空间计算平台——Rokid AR Studio,采用了OST(Optical See ThRough)技术。

Rokid AR Studio继续延续Rokid分体式设计理念,由AR空间计算眼镜Rokid Max Pro与AR空间计算主机Rokid Station Pro组成。

在硬件设计上,Rokid Max Pro的机身重量仅为76克。与今年3月推出的Rokid Max相比,Rokid Max Pro在双目镜片中间增加了一个摄像头,机身重量仅增加1克,但却具备了“以手势交互为核心的空间计算能力”,包括SLAM、微手势交互、第一视角分享和视觉定位VPS能力。

在视觉表现方面,Rokid Max Pro延续了Rokid Max的优秀性能。它配备了全新的BIRdBATh模组,视场角达到50度,相当于6米外215英寸超高清大屏的效果。此外,Rokid Max Pro还搭载了索尼半导体科技的MicRo OLED屏幕,最大亮度可达600nIT,屏幕分辨率为1920×1200,并支持最高120Hz的刷新率。

如此强大的空间计算能力,得益于轻便的76克机身背后的Rokid Station Pro主机。该主机搭载了高通最新的骁龙XR2+扩展现实平台,相较于骁龙XR2平台,散热性能提升了30%,续航能力提升了50%。

Rokid Station Pro配备骁龙XR2+处理器,12G RAM和128G ROM,支持WiFi6和BT5.1,其续航能力是手机方案的两倍以上,同时具备更好的散热性能和更高的处理能力,能够实现厘米级的6DoF跟踪精度和极低的MTP渲染延迟。

在交互方式方面,Rokid AR Studio不再依赖手柄或遥控器,而是通过眼睛、手势和声音实现实时操控。手势将成为主要的交互方式,例如,手指一捏即可点击和选中;左右拨动可切换正在浏览的界面或内容。在特定场景下,用户还可以通过抬腕、捏拳和拖拽等动作进行操控。

在信息展示方面,Rokid Max Pro支持空间多屏与巨幕两种展示方式,极大地扩展了信息呈现的灵活性。空间多屏允许同时开启多个窗口并并列排列,带有空间定位功能,用户只需轻微转头即可一览信息。而行业首创的超大巨幕比例可达32:9,打破了屏幕尺寸的限制。

目前,AR领域主要应用于影音、办公和游戏三大场景。在影音场景中,空间声场提供了立体和身临其境的音效体验,而3D影像则精准呈现多角度的立体效果;在办公场景中,用户可以超越物理限制进行空间展示,满足多样化的使用需求,同时灵活的多任务处理和手势切换提升工作效率;在游戏场景中,沉浸式体验增加了挑战性和趣味性,例如,玩家需要通过手势操作控制角色战斗,或利用空间定位躲避障碍物和攻击敌人。

YodaOS-Master操作系统的发布

Rokid Station Pro搭载的全空间化AR操作系统YodaOS-Master,连接了物理世界与数字世界。它通过摄像头捕捉并基于分区的ATW/PTW低延迟渲染,实现厘米级的单目SLAM精度,精准感知物理空间。借助优化算法和XR2+硬件加速,YodaOS-Master能够高精度捕捉3D手势的位置,并通过低算法延迟满足手势追踪的实时性要求,从而实现3D手势交互。

为了打造最佳的XR体验,YodaOS-Master在芯片优化、硬件设计、软件架构、AR算法以及创作工具等诸多方面进行了显著升级,基于单目摄像头的空间算法能力已达到行业领先水平,成为目前最完备的AR空间操作系统之一,专为空间计算时代而设计。

新一代人机交互产品AR Studio发布

YodaOS-Master围绕空间感知、空间理解、空间渲染和空间交互展开设计,通过系统底层到顶层的优化,为用户带来了前所未有的空间体验,同时为开发者提供了从硬件到应用层的全链路服务。

Rokid AR开放平台已全面升级为UXR SDK 2.0。

Rokid UXR 2.0开放SDK支持0/3/6 DoF空间模式的选择,以及手势、射线、键鼠和语音等多模态交互方式,以满足多样化的应用开发需求。算法的原子化设计使得应用在系统升级中自然获得性能提升,减轻开发者的负担;系统性能监测工具和调试模式便于开发者随时了解运行状态,同时兼容Rokid跨代设备。

UXR SDK 2.0兼容Unity等主流OpenXR标准引擎,并支持MRTK接口,使开发者能够轻松开发和移植应用。目前,在Rokid Station Pro搭载的AR实验室中,大部分作品都是开发者基于Unity引擎进行创作的。

在Master系统中,Rokid还内置了自研的JSAR引擎和小组件容器,JS开发者可以轻松上传自己的组件。JSAR支持多平台,简化开发流程,增强运行安全性;新增的快应用生态类型无需下载安装,用户点击即可快速生成各种短小有趣的快应用。

此外,Rokid还设立了AR专项开发者基金,以发现并扶持优秀的AR开发团队,邀请更多开发者加入,打造丰富的AR应用生态。

与Unity3D引擎共同打造XR生态

为了让用户充分体验空间计算带来的真正AR体验,Rokid与Unity引擎合作,推出了支持6DoF和手势操作的首批生态内容。

Unity是被广泛使用的实时3D引擎,具备高质量、轻量化与跨平台兼容性,构建了支持各种XR硬件的新XR架构,使创作者能够高效创建高质量的游戏与应用。Unity中国XR产品技术总监李鹏鹏表示,将与Rokid共同推进XR生态的繁荣。

Rokid Station Pro搭载的首批空间3D生态内容,包括移动云VR、指尖战争、上帝之手、飞镖大赛等应用和游戏,这些均是基于Unity开发的。

同时,Rokid Station Pro也兼容安卓2D生态。在Rokid Station上备受欢迎的安卓应用,如爱奇艺、腾讯视频、哔哩哔哩、优酷、芒果TV、影牛牛、随乐游、无影云电脑等,均可在Rokid Station Pro上使用。其中,无影云电脑特别为适配3D生态定制了空间大屏。其他手机、平板等移动终端的众多2D安卓应用也可以在上面使用。

目前,Rokid的空间计算技术已在展陈、教育教学、文旅、工业和汽车等多个领域得到了广泛应用。例如,今年4月,Rokid与战略合作伙伴钉钉共同发布了钉钉数字文化墙,通过AR数字展厅的构建,降低了企业文化墙建设的门槛,并缩短了体验路径。