无线连接、6DoF、手势追踪,日本NTT集团的AR眼镜MiRZA有何亮点?
发布时间:2024-10-21 16:24 浏览量:15
文/VR陀螺 Welkin
10月16日,一款由日本厂商设计开发的AR眼镜“MiRZA”正式上市。该产品搭载了骁龙AR2 Gen1,主打无线连接,提供较为轻便的佩戴体验,且支持支持6DoF空间定位和手势追踪操作。
两年前,日本电信电话集团(NTT)在2022年10月成立了子公司NTT QONOQ,旨在于XR时代拓展新业务。2023年4月,NTT QONOQ又与夏普公司成立合资企业NTT QONOQ Devices,集结双方的人才自主研发XR设备。直到今年,这款命名为“MiRZA”的AR眼镜才终于揭开面纱。
在产品发售前,一些海外媒体已经获得了提前体验的机会。本文就基于相关的实机体验报告、采访和官方公开的信息,聚焦这款来自日本、售价约1.2万元人民币的AR新品。
图源:NTT QONOQ Devices搭载高通骁龙AR2 Gen 1,使用LetinAR的光学方案
NTT ConoQ Device公司推出的这款无线AR眼镜——MiRZA(型号:XRD-T01),其一些基本参数信息如下:
重量:约125克使用时:187mm(宽)×45mm(高)×184mm(深)
收纳时:187mm(宽)×45mm(高)×96mm(深)
分辨率:FHD(1920×1080)
视场角:45度(对角线)
亮度:约1000尼特
光学设备:MicroOLED 双目全彩(※LetinAR公司的薄型Mirror Bar光学模组)
相比目前市面上大多AR产品采用有线串联眼镜和智能手机/计算单元的形式,MiRZA能通过Wi-Fi或蓝牙与智能手机无线连接,这得益于内置的高通骁龙AR2 Gen1。这也是首款搭载骁龙AR2 Gen1并上市的XR成品。(注:此前Nitantic等公司仅展示过原型机。)
骁龙AR2 Gen 1最早于2022年11月召开的骁龙峰会上正式发布,是高通专为AR终端打造的平台。据悉其主处理器所占的空间减小了40%,支持9路摄像头并发,能让AR产品实现更强的空间定位算法,支持眼动追踪、虹膜、手势识别等,并且耗电量降低50%。该系统还搭载FastConnect 7800移动连接系统,支持Wi-Fi 7网络协议(向下兼容WiFi 6/6E等),可以让AR眼镜与其计算单元(移动主机、智能手机等)无线连接,Wi-Fi 7的传输峰值速率可达5.8Gbps,传输延迟最低小于2ms。
此前高通曾透露,已有包括联想、LG、PICO、Rokid、XREAL等多家OEM厂商均采用了骁龙AR2 Gen 1。
MiRZA并不能独立运行,还需要一部智能手机和专用App才能使用。分体式方案能够有效降低眼镜的重量,摆脱线缆的束缚,让AR设备拥有更舒适的佩戴体验和更强的灵活性。目前确认支持的手机型号为搭载了Snapdragon 7+ Gen 3的夏普AQUOS R9,其他支持型号会陆续公开。
图源:MoguraVRMiRZA的另一大特点是使用了由韩国公司LetinAR开发的薄型Mirror Bar光学模块,在镜片中心附近能看到许多狭缝状的微小镜面,很有辨识度。
LetinAR公司成立于2016年,自研PinMR(Pin Mirror)和PinTILT技术。他们将所谓的“针孔效应”应用于微小的镜面,并将其嵌入眼镜镜片中。PinMR透镜能反射来自微型显示器的光线,并引导光线进入人的瞳孔。用户可以同时查看微型显示器上的虚拟图像和现实世界中的图像。由于镜面比人的瞳孔小,极近距离的情况下肉眼无法发现镜面,只有由这些镜面反射的光线形成的虚拟图像才是可视的。
据称该方案的优点是可以将光学器件做得更轻薄,且便于批量生产。PinMR透镜能显示更宽的虚拟屏幕,准确地表现色彩,而且还能多次扩展景深 (DOF),因此可以获得清晰明亮的图像,不会引起眩晕,能完全避免彩虹纹,同时降低功耗。
图源:MoguraVR波导、PinTILT和Birdbath光路(图源:LetinAR)MiRZA眼镜中央有1颗分辨率为1920×1080的RGB摄像头,左右镜腿的前端还各集成了1颗单色摄像头,实现空间识别。使用Snapdragon Spaces XR开发平台,支持用前置RGB摄像头拍摄、以及利用摄像头画面开发XR应用。此外在启动摄像头时,LED灯会亮起以提醒周围的人。
镜腿的太阳穴区域共集成了4个麦克风、2个扬声器和1个触摸传感器。其他传感器包括1个用于识别佩戴状态的接近传感器,1个用于调节显示屏亮度的照明传感器,以及1个基于加速度计、陀螺仪、摄像头来实现6DoF的空间识别传感器。
内置电池位于镜腿尾部,实现重量的平衡。在左侧镜腿的末端还有USB Type-C接口,用于充电,也可以连接移动电源来延长眼镜的续航时间。
针对强光环境下优化显示效果的需求,MiRZA还提供遮光片,包括半遮光和全遮光两种。而对于近视用户,开发商则与日本的眼镜连锁店Paris Miki和Eye Japan合作,可基于视力度数定制额外的插入式镜片,售价为12100日元(※折合人民币约576元)
图源:GoodsPress面向企业和开发者用户,第2代消费者款明年上市
考虑到MiRZA内置了电池和各种传感器,125g的重量虽不算特别有优势但可以接受,不过1-1.5小时的续航时间就显得比较短了,再加上高达24.8万日元的定价不菲。因此,NTT ConoQ Device也将第一代产品定位为面向企业和开发者设备。
MiRZA支持用手机和手部追踪操作。一些基本的功能,如选择要显示的应用或窗口,可通过安装在智能手机上的MiRZA应用来执行,手机前端会显示一条射线,便于执行点击、拖动等操作。如果用户选择了支持手部追踪的应用,随后就可以将智能手机放在口袋里,完全用手势来实现“免提”操作。
图源:NTT QONOQ Devices在目前展示的应用场景中,NTT ConoQ Devices将MiRZA视为工厂和其他工作场所的远程工作支持设备——摄像头捕捉到的现场情况会被发送到办公室,这些图像可用于预测工作程序以提高效率。
MiRZA还与《Xrai Glass》应用程序兼容,后者可以实时翻译对话并显示为字幕。眼镜中显示的字幕的字体大小、位置和颜色都可以调整。MiRZA和智能手机这两个设备上的麦克风可以同时使用,因此即便在嘈杂的地方,只要把智能手机凑到对方的嘴边,就能稳定地听到对方在说什么,并看到眼镜上翻译出的文字。
在配合美术馆、博物馆开发的应用中,用户除了可以用眼镜观看虚拟空间展出的作品,阅读相关的文字介绍外,还可以将虚拟展品“握”在手中旋转、把玩。
图源:NTT QONOQ Devices以“沉浸式娱乐”为主题,利用XR和新技术策划并开发娱乐体验的日本创意工作室curiosity则为MiRZA开发了一款竞速游戏《LAP CUP》。玩家可以选择诸如恐龙、怪诞虫等古代的灭绝生物,在悬浮于现实环境的XR赛道上飞驰。用户晃动手掌可以为动物们加油,使其加速,但如果过度加油,则会令动物们疲倦,导致行动迟缓。
另一款名为《GHOST HUNTER》的游戏,玩法是利用手掌投射的光线捕捉藏匿在空间中的6只幽灵。目标只有通过眼镜才能看到,手机端则有类似雷达的界面作为提醒。
NTT QONOQ Devices表示,目前公司正在与12个解决方案合作伙伴和2个案例研究合作伙伴一起开发其他应用,如多个并排浏览器窗口和允许用户从任何角度查看3D模型的应用,将活用AR的用户界面和MiRZA的特性。
图源:curiosity早前,NTT QONOQ的总裁丸山诚治在接受外媒采访时谈及了这款产品。
“从功能上讲,我们的设备涵盖了将3D模型放置在空间中,以及让显示屏等2D信息漂浮在空中这两种类型的AR。我认为它们适合不同的使用案例和内容。我们的理念是‘随时随地轻松佩戴’,因此除了2D和3D外,我们还在考虑类似智能眼镜的用途,如显示通知、语音转录等功能。”
“我们预计AR眼镜的引入将从企业用例开始,因为它们需要与智能手机连接;而对于B2C,我们预计习惯于在企业中使用AR眼镜的人也会开始将其用于个人用途。作为销售渠道,我们还考虑通过网上商店销售AR眼镜。”
丸山表示:“XR仍然是一项新兴技术,我认为每个人都还在摸索中前进。我们意识到,第一阶段终于结束了,在这一阶段,我们首先进行了各种尝试,并检查了客户反应和技术问题。下一阶段,我们将重点关注反响良好的领域,并与合作伙伴合作进一步开发这些领域。”
NTT QONOQ总裁丸山诚治(图源:MoguraVR)结语
NTT QONOQ Devices公司的总裁堀清敬表示:“首先,我们希望面向全世界推出第一款产品,并创造应用场景。”第二款面向普通消费者的产品计划于2025年推出,将瞄准普通用户能够承受的价格范围,同时还将进一步追求“接近眼镜形态”的理念。
当被问及是否考虑让MiRZA与PC连接或支持SteamVR时,堀清敬回答说:“从技术上讲这是可能的,但我们不会成为提供强烈沉浸式体验的护目镜型设备的竞争对手,而是希望创造让用户能流畅地体验现实的产品。”
NTT和夏普各自的优势今后在MiRZA上会进一步体现,而作为日本产的AR眼镜,它能否率先建立起一个面向企业和开发者的生态系统,我们也拭目以待。
图源:MoguraVR参考资料: