XR 世界导览 030
Connect 大会发布的 Orion 最大的意义,是给人们以希望
封面
本期封面,我们分享的是来自 Max 制作的 Spline 场景 Lighting Bulb。
刊首语
本周最为重磅的消息应该就是 Orion 原型机的面世了,尽管比起来 Apple Vision Pro 价格更贵,并且大家上手的时间更长更没有预期(是的,现在对于 Orion 什么时候能够正式面向消费者,Meta 并没有给出明确的预期),Orion 的发布还是在行业内外引起了不小的轰动,从微信指数的数据看来,这一次 Orion 的发布得到了比二月份 Apple Vision Pro 发售更大的关注。
也许很多文章、视频都会说,未来已来 blabla,但我个人还是觉得,现阶段 Orion 的发布最大的意义,是给人们以希望,让人们看到:AR 眼镜并不是一个不可能的产品,现有的技术还是可以完成一个在硬件指标上勉强够用的产品,最起码,离我们期待的大家都能用上 AR 眼镜的那一天应该不会超过十年(🤣),就像本期封面的灯泡一样,我们现在已经看到了一些微弱但稳定的光芒。
目录
News
- Meta Connect 大会
- Meta 发布了 Meta Spatial SDK
- Apple 提供了新的 visionOS Sample Code Tools
- PICO Emulator(Beta) App
- Story: Spatial Storytelling Code
- SGMExamples:Shader Graph Material Examples in visionOS
- RealityMixerVisionPro:Mixed Reality Capture app for the Vision Pro
News
Meta Connect 大会
美国当地时间 9 月 25 日,Meta Connect 大会正式开幕,在这次大会上,Meta 不出意外的发布了大家提前都已经非常熟悉的 Meta Quest 3s。
关于 Meta Quest 3s 可以说的并不多,你可以理解为是 Quest 3 的一个廉价版本,CPU、镜头都没有太大的变化(甚至镜头略有下降,回到了 Quest 2 的分辨率水平),128GB 价格 $299,256 GB $399,折合人民币 2000 左右,发售当日就可以预购,十月 15 日开售。购买者可以获得一个蝙蝠侠·阿卡姆的游戏。
顺便一提,Quest 3s 这个名称确实很有迷惑性,叫它 Quest 3 lite 或许会更好一点。
此次 Meta 对 Quest 3s 的描述,以及操作系统 Horizon OS 的描述,都在将其描述为一个混合现实的产品。
而此次发布会更大的两点则是 Orion——一款据称 Meta 研发了 10 年的产品,这是一款目前还不向消费者发售的 AR 眼镜,它采用了碳化硅镜片,拥有 70° 的,镁制作框架,自研芯片,支持眼动追踪和手势识别,续航大概两个小时,重量仅有 90g,同时带有一个随身的计算单元 Wireless Compute Puck(这个计算单元上看着还有一个摄像头,但目前还不知道这个摄像头具体是用来做什么的),一个可以感知肌电信号的腕带,这样可以在 Orion 检测不到手的时候。
目前这个腕带可以识别到的手势除了拇指和食指的捏合,还可以感知一个滑动的手势,这个手势看起来用在上下滑的场景下是非常完美的:
从发布会的信息来看,一个 Orion AR 眼镜的成本大概在 1 万美元(2022 年的量产数据),因为物料成本太高,因此 Meta 也是不得已搁置了这个产品的正式发售计划,并且只制造了 1000 副,用于公司内部展示和合作伙伴试用。
个人觉得,现阶段 Orion 出现的最大意义,是让大家认识到:现有的硬件技术,其实是可以实现一款轻量级、6DOF、支持眼手追踪的 AR 眼镜的,尽管目前的技术水平还只能做到 70° 的 FOV(在 AR 眼镜中,这已经是一个非常大的 FOV 了),但这已经是一个非常好的开始了(如果细心看国外媒体的评测,你就会发现 Orion 目前 70° 的 FOV 在佩戴时还是能明显看到可截断的边缘的,起码会让人有一种非常明显的“出戏”的感觉)。
更多关于 Orion 的细节信息,已经有很多非常好的文章做了详细的介绍,感兴趣的话也可以点击来看看:
- 最强 AR 眼镜来了!Meta 十年绝密项目,你的下一台手机可能是眼镜
- The Verge: Meta’s big tease
- My First Dive Into Meta's Orion AR Glasses And Neural Wristband
Meta 发布了 Meta Spatial SDK
熟悉当年 Android 和 iOS 相爱相杀历史的开发者,一定对这一幕不陌生:Meta 发布了一个全新的在 Quest 上开发的 SDK——Meta Spatial SDK,用这个 SDK,你可以使用 Android Studio 和 Kotlin 在 Quest 上进行空间应用的开发(这两样东西对于 Android 开发者可再熟悉不过了)
在 Android Studio 中,你可以基于 XML 来编辑空间应用的 UI:
还可以用类似 visionOS 开发用到的 Reality Composer Pro 的 Meta Spatial Editor 中编辑 3D 场景:
不得不说概念是真一致,同时官方还放出了 10 个 Sample Code,感兴趣的小伙伴可以直接去 Github 并根据 文档 来快速上手玩一下。
Apple 提供了新的 visionOS Sample Code
最近,Apple 提供了新的 visionOS Code Sample,比起之前相对来说是一个完整大工程的 Sample Code,此次的 Sample 挑选的都是相对比较简单的小工程,适合初学者入门。
Tools
PICO Emulator(Beta)
PICO 最近在官网上发布了一个新的 Debug 工具:PICO Emulator,其主要功能就是能够在 PC 和 Mac 上模拟运行原本需要运行在 PICO 真机上的应用,你可以通过 adb 或者直接拖拽 apk 来进行安装。同时,模拟器本身也支持了键盘和手柄的映射。
App
Story: Spatial Storytelling
Story 是一个可以为 Apple Vision Pro 用户带来极致沉浸式视频体验的 App。在这里,你不仅可以观看像这样的通过图片、模型、文字组合起来的 360° 沉浸式视频:
还可以沉浸式查看清晰度为 16K 的风景视频:
目前 App 中已经有五个视频,并且更多的视频将会在后续陆续放出。
作为一款沉浸式视频播放应用,Story 令人惊喜的有两点,第一点是高达 16K 的视频清晰度(这和 Apple Vision Pro 的分辨率搭配起来真是绝配),在观看风景时,极致的清晰度真的会让你眼前一亮。
第二点,则是 Story 背后的愿景:让更多的人能够制作这样的空间视频,因此我们更可以说 Story 是一个内容平台,来看看在 Vision Pro 中就可以使用的编辑器:
Code
SGMExamples:Shader Graph Material Examples in visionOS
要想做出炫酷好看的 App,Shader Graph 绝对是 visionOS 开发者所必备的技能之一。但无奈官方只有文档,而缺乏一些更进一步的例子,这就给初学者带来了一定的困难。
但现在,拥有 SGMExamples,你就可以通过这个项目来更好的学习 Shader Graph 的使用,这个项目中包含了很多高级的 Shader Graph 使用场景,这个水波纹就是其中之一:
非常感谢 Yasuhito 开源了这么好的项目
RealityMixerVisionPro:Mixed Reality Capture app for the Vision Pro
所有使用 Apple Vision Pro 的朋友们可能都遇到过一个问题:旁边的人看不到你眼镜里的内容,尽管我们可以通过投屏来解决这个问题,但这个方案并不是最优的。
非常感谢 Fabio Dela Antonio 在这个问题上做出的尝试,通过 RealityMixerVisionPro,你可以将 Vision Pro 看到的内容以立体的形式投射到手机上,这样你的朋友就可以看到你眼镜里的内容了。