XR 世界导览 018
深度、优质,帮 XR 世界前 1% 的你保持领先
本期封面
本期封面是来自 Ramotion Future Labs 所设计的 Movie trailers on IMDB,注意看那块浮空屏幕旁边和现实世界墙壁完美融合的光效,这正是设计师所畅享的在 Apple Vision Pro 中观看电影的一个核心体验提升。
目录
BigNews
- 299 美元的 Developer Strap,值吗?
- 30 Best XR Blogs and Websites
Idea
- 还能这么玩?利用 Sora 生成空间视频
- 用 3D 打印的小配件提升你的 Apple Vision Pro 体验!
Tool
- 拟真的 3D 生物模型
- 拿到 Apple Vision Pro 后,我该去哪里发现好玩的 App?
- SixD - 帮你了解 visionOS 上的设计最佳实践
- Splitscreen - 在 Apple Vision Pro 上双屏不再是梦
- Rodin Gen-1 - 在 Apple Vision Pro 中体验抓取图片变成 3D 模型
Article
- Apple Vision Pro 的那些辅助功能
- 清洁 Apple Vision Pro 及其配件的小妙招
Code
- GodotVision- 帮你在 Goddot 上开发 visionOS!
SmallNews
- Apple Vision Pro 的退货率真的很高吗?
BigNews
299 美元的 Developer Strap,值吗?
关键词:visionOS、Apple Vision Pro、Developer Strap
距离发售已经过去几周的时间了,如果你是拥有了 Apple Vision Pro 的开发者,那么在设备上进行项目测试可以选择通过 WIFI 直接进行调试,具体步骤可参见这篇文章: 如果你是 Apple Vision Pro 的开发者,那么你一定要注意这些点 。
不过,如果你的 visionOS 项目很大,那么每次通过 WIFI 进行调试就会需要等待比较长的时间。而现在你又多了一个选择:购买 Apple Vision Pro Developer Strap 进行有线调试。
Tips
需要注意的是,当前如果要购买 Developer Strap,必须要有一个美区且加入到 Apple Developer Program 的开发者账号,且一个账号最多能够购买 5 个 Developer Strap。
当然,和 iPhone 比起来,要额外购买这样一个配件才能使用 USB 线调试,无疑是给开发者增加了额外的成本,在推特(X) 上,一些开发者也在 吐槽这一点:更多吐槽:吐槽1,吐嘈2
不过吐槽归吐槽,理性分析这么高昂的定价一部分原因是因为 Developer Strap 不仅仅是连接线缆,而且它还是一个配备了右侧扬声器的线缆。当然现阶段,如果真的项目很大,花 $299 购买这样一款配件还是值得的。Dilmer 也在他的 视频 中对比了一下,他的项目在使用 Developer Strap 后,安装到 Apple Vision Pro 的时间从 19s 下降到了 6s,几乎是三倍的差距。
当然根据 Jeff Benjamin 的发现,目前 Developer Strap 连接上 Mac 后只能提供 100Mbps 的 USB 2.0 连接,但严格的来说 Developer Strap 并不是 USB 2.0 设备,而是支持 Thunderbolt,这表明硬件规格上是支持连接外部显示器、任何类型的支持 USB 的设备等。
但是 Stephen Robles 测试下来,目前这些外接设备都是无法工作的,不过这只是软件上的限制,未来也许有一天 Apple 会允许开发者外接更多设备(吗)。
除了提供更快的项目传输速度,Developer Strap 目前还可以提供更稳定的 Mac 屏幕镜像,且升级到了 Beta 系统的 Apple Vision Pro 如果变砖,如果没有 Developer Strap 进行系统降级恢复,那么就要到美国的苹果零售店进行恢复了。
具体的降级步骤 如下:
- 断电,在 Apple Vision Pro 上安装 Developer Strap;
- 通过 Developer Strap 的 USB-C 端口,使用 USB-C 线缆将 Apple Vision Pro 连接到 Mac;
- 连接电源线后,然后立即按住 Apple Vision Pro 上的顶部按钮,直到看到显示屏正面出现“连接到 Mac”;
- 打开 Apple Configurator,双击 Apple Vision Pro 设备 icon,并确保它在恢复模式下识别 Vision Pro;
- 单击菜单栏中的“Action”,按住 Mac 键盘上的 Option 键,然后单击“Restore”;
- 找到 visionOS IPSW restore image ,然后单击“Restore”。
30 Best XR Blogs and Websites
关键词:Blog、XR
FeedSpot 是一个在线服务,其允许用户聚合、阅读、监控和管理来自各种在线源(如博客、新闻网站、RSS 源和 YouTube 频道)的内容。最近,FeedSpot 评选出了 30 个最好的 XR 博客和网站,非常开心的是,XR 基地也名列其中。这里非常感谢大家的认可。同时,如果你想看到更多的优秀 XR 博客,也可以关注这个列表中的其他博客。
Idea
还能这么玩?利用 Sora 生成空间视频
关键词:Sora、Spatial Video
最近去了希腊圣托里尼岛,用无人机拍了一段空间视频,看着怎么样?
如果你最近有关注 Sora,那么我坦白,其实这段视频是用 Sora 生成的。但是它是怎么变成空间视频的呢?
其实是 Andrew Mayne 利用 Sora 生成的视频,首先直接拷贝放在左右目,再根据相机的移动方向,将某一只眼睛的视频晚几帧播放,形成左右眼视差,最后合成了空间视频,更多例子可以在他的 Github 仓库 下载然后在 Apple Vision Pro 中体验。
不过这个做法的缺点是,要求生成的视频必须是镜头水平移动的,否则同一个视频,后面的帧和前面的帧无法形成正确的视差。
因此,除了这一做法以外,油管的博主 Hugh Hou 还给大家介绍了其他若干借助神经网络深度估计的方法来生成空间视频。
如果愿意支付一定的💰(对于 1080P 视频约为 0.75$/min ,对于4K视频约为10$/min),大家可以选择 HaloDepth 在线的转换服务,直接将想要的视频转换为可在 Vision Pro 中播放的 3D 视频。而如果有强劲独显的 Windows 台式机,还可以选择免费的 Owl3D 获得 3D 视频格式,再结合 ffmpeg 将视频转换成 Vision Pro 兼容的空间视频。
当然,如果手头只有一台 Apple Silicon 的 Mac,我们还可以使用 Spatial Media Converter 来将普通 2D 素材制作为空间照片/空间视频,只是转换速度会慢一些(毕竟要本地跑 Depth Anything模型 来估计逐帧图像的深度)。值得一提的是,这类转换方法利用的神经网络模型,其估计的图像深度在物理尺度上并不准确,一般都需要大家调整一个 Depth Multiplier 来控制内容的立体化程度,而且可能在时间轴上会有深度值的波动。因此,最终效果和实拍还是有较大的差距哦。
用 3D 打印的小配件提升你的 Apple Vision Pro 体验!
关键词:Apple Vision Pro、配件、3D 打印
Apple Vision Pro 真的是非常神奇的体验,当你能够将其重量均匀的分配在你的脑袋上。这不已经有许许多多的小配件可以实现 600g 再分配!
- 搭配帽子
Dual Band 头带确实可以让我们使 Apple Vision Pro 用更长时间,但他会破坏我们的发型!所以有人想到利用帽子配合两个挂钩,既能做到重量再分配,也能做到发型保护,一举两得!
缺点是如果佩戴者的头比较大,挂钩会让两侧的 strap 有变形的风险,且用且小心…
- 多个绑带齐上阵
除了利用帽子,我们是不是可以同时使用多个绑带呢。由 Nick McClure 设计的 Solo Top 就可以结合多个头带来进行重量的再分配,而且经过 大耳朵 的测试,两个 Solo Knit Band 确实能提供几乎完美的体验!缺点是需要再买一个 99 刀的 Solo Knit Band。
- 其他配件
除了用于重量再分配的小配件,也有一些用于摆放 Apple Vision Pro 的支架,可以避免让我们的设备内部屏幕受到灰尘的侵蚀,同时可以把 Apple Vision Pro 变成一个摆件。
如果大家感兴趣,我们也可以来 3D 打印一波…
Tool
拟真的 3D 生物模型
关键词:3D Model、SketchFab
ffish.asia 和 florazia.com 是两个专注自然科学研究的网站,最近,这两个网站在 SketchFab 上上传了不少真实的自然界动植物的模型,总数达 2700+,并且其中很多都是可以下载的。
如果你的项目想使用一些真实的动植物模型作为点缀,那你可以在这其中寻觅一番。
拿到 Apple Vision Pro 后,我该去哪里发现好玩的 App?
关键词:Apple Vision Pro、visionOS、vision.directory
Apple Vision Pro 拿到手后却发现不知道要下载哪些 App?除了在官方 App Store 首页进行探索,这里我们推荐三个网站,可以帮助你快速找到一些好玩的 Apple Vision Pro 上的 App。
首先是 vision.directory,这个网站会直观的根据 App Store 上的分类将 App 进行分组,同时也支持邮件订阅,可以查看每天新上的 App。
第二个是 Apps For Apple Vision Pro,和 visiono.directory 类似,这个网站也根据 App Store 的分类将 App 分组。
不过相对特殊的是,在每个 App 的详情页面,可能还会展示开发者的一些额外信息,例如官网、Twitter 以及邮件,更好的让用户找到开发者,建立连结。
如果你是开发者,你都可以在以上两个网站中通过提交表单来提交自己的 App。
除此之外,中国的开发者也可以关注一下 V2XR 搭建的 Side Vision Pro,在这个网站中,V2XR 会分享他看到的一些好玩的 Apple Vision Pro App。
SixD - 帮你了解 visionOS 上的设计最佳实践
关键词:Apple Vision Pro、SwiftUI
SixD 是一款能够帮你快速了解 Apple 生态设计规范的 SwiftUI 设计与开发工具。这款 App 由获得 WWDC 2023 学生挑战赛奖学金、目前在洛杉矶帕萨迪纳艺术中心设计学院攻读交互设计专业的 杨昊伦 开发,并在最近适配了 visionOS 系统。
在这个应用中,我们可以通过交互式的教学,通过动手修改一些常见的错误设计来学习设计的最佳实践。
在 SixD 的 SwiftUI Lab 中,你可以直接使用所见即所得的图形界面设计 SwiftUI 组件,并获得对应的 SwiftUI 代码。在全新的 visionOS 版本中,你还可以一键为 3D 模型添加持续旋转和拖拽交互等。
适配了 visionOS 的版本特别添加了关于三维物体交互的部分,可以让我们更形象的理解在 visionOS 中的交互(比如物体自旋转、用户操作物体移动等)是什么样的。
使用 SwiftUI 开发时,如果不知道怎么实现一个设计,无论是字体、动画,还是按钮、导航,甚至 MapKit、PencilKit,都可以打开 SixD 获得你需要的 SwiftUI 组件。SixD 透过「交互式的人机界面指南」和所见即所得的 SwiftUI 设计工具,补齐了 visionOS 开发体验的一块重要的拼图。
更重要的是,在 Apple Vision Pro 上随便一个软件就收费高达 19.9 美元的现在,SixD 是免费的!
Splitscreen - 在 Apple Vision Pro 上双屏不再是梦
关键词:Mirror、Splitscreen
将 Mac 投屏到 Apple Vision Pro 上是一个非常棒的功能,但是只能镜像一个屏幕是很多人吐槽的点。这不,Jordi Bruin 等人开发的 Splitscreen,让你屏幕双开不再是梦。
在已经开启 Mac 投屏到 Apple Vision Pro 后,打开 Vision Pro 上的 Splitscreen,再通过 Mac 上的同名应用进行连接,即可在 Vision Pro 上享受双屏工作的体验。稍有不足的是 Splitscreen 目前只能提供 1920 x 1080 的镜像。另外 Splitscreen 还处于 TestFlight 状态,如果想抢先体验的可以在 Jordi 提供的 问卷 上填上自己的邮箱,等待被邀请参与测试。
Rodin Gen-1 - 在 Apple Vision Pro 中体验抓取图片变成 3D 模型
关键词:AI 3D Generation
来自上科大的影眸科技,近日在 X 上展示了在 Apple Vision Pro 上利用 Rodin Gen-1,实现将网图变成可沉浸浏览的 3D 模型的功能。在视频中,工作人员将一张来自 X 推流中的图片送入了 Rodin Gen-1 的网页端,在数秒钟后,即可下载获得对应的 GLB 模型,并在 Vision OS 中自由拖拽和浏览。据影眸透露,Rodin Gen-1 同样使用了和 OpenAI Sora 类似的 Diffusion Transformer 模型架构,从而获得了更好的模型扩展能力。
Article
Apple Vision Pro 上的那些辅助功能
关键词:Accessibility、Apple Vision Pro
尽管只是一款初代产品,但从来在人文关怀方面做的很好的 Apple 依旧在 Apple Vision Pro 上提供了非常全面的辅助功能,以帮助各种各样的人都能够体验这款空间计算设备。而在这篇 Vision Accessibility on Apple Vision Pro 的文章中,作者作为一名眼球震颤(眼睛会不由自主左右或者上下晃动)的患者,为我们详细阐述了他所体验的所有 Apple Vision Pro 上的辅助功能,包括 Voice Over、Voice Control、Bigger Text Size、Window Zoom 等。
Tips
同样作为一名眼球震颤的患者,御姐(Onee)对作者的说法深表赞同,虽然 90% 的场景都能够正常使用,但是在一些需要选择细微组件的场景下,眼球震颤患者总是会遇到令人恼怒的无法精确对焦的问题。好在 Apple Vision Pro 也提供了 “头追” 和 ”手腕追踪” 的方案来解决这个问题。
无独有偶,另外一位几乎全盲并且也有眼球震颤的 Up 主 James Rath 也在他的一期视频中提及到了 Apple Vision Pro 的辅助功能给他带来的帮助,这包括 Apple Vision Pro 的让他眼中的世界更清楚(因为屏幕距离眼睛更近了),也包括 Voice Over 能够帮助他识别现实世界中的场景(比如面前有多少个人)。如果你对 Apple 的这项能力还不了解,你可以看看 Kristy Viers 的 这个视频 了解 Apple 已经在放大器这个 App 给盲人带来的 “阅读世界” 的能力。
清洁 Apple Vision Pro 及其配件的小妙招
关键词:Apple Vision Pro、清洁
和其他所有电子设备一样,Apple Vision Pro 也需要定期清洁,根据 官方的指南,结合我们这些天的使用经验,我们总结了清洁 Apple Vision Pro 及其配件时需要注意的事项。
- 关于前置面板玻璃的清洁。
注意,根据 JerryRigEverything 的测试前置面板玻璃极其容易刮花,所以使用超细纤维布,比如 Apple Vision Pro 抛光布进行擦拭时,注意检查抛光布是否本身已经粘附了一些颗粒。
前置面板玻璃是一块覆盖在用于显示 Eyesight 屏幕前的外置玻璃,如果在前置面板玻璃上看到松散的灰常颗粒,可以用干净、干燥的超细纤维布擦拭。或者先将蔡司清洁喷雾涂抹在 Apple Vision Pro 抛光布上然后擦拭前置面板玻璃
如果前置玻璃板损坏,维修费用是 799 美元(如果加购了 AppleCare+ 则是 299 美元)
- 关于 Apple Vision Pro 显示器的清洁
在擦拭显示屏的时候需要注意,如果是把设备放在桌面上操作,建议套上保护套后再操作,如下图左侧所示。建议使用超细纤维布,或将蔡司清洁喷雾涂抹在抛光布上后进行擦拭。
不要使用任何纸制品对屏幕进行擦拭!
- 关于显示屏周围 Curtain 的清洁
Curtain 的位置如上图右侧所示,屏幕周围的 Curtain 很容易收集一些小的颗粒、碎屑,可以使用干燥的无绒布或软毛刷清除碎屑,或者用非粘性胶带清除颗粒。如果有污渍,则需用湿绒布轻轻擦拭污渍,注意不要打湿显示屏!
- 关于 Light Seal 垫、头带和 Apple Vision Pro 保护套的清洁
这些经常接触面部、头发的配件很容易变脏,官方建议的清洗方式是将这些配件放入水中,并加入不含香料、无味的洗洁精,进行按压并揉搓清洁。最后将其放在室温下风干。在完全干燥之前不要使用。
- 关于 Light Seal 的清洁
类似第四点,但是不能将 Light Seal 放入水中,而是将柔软的无绒布放入肥皂水中,然后挤干、轻轻擦拭 Light Seal。最后将其放在室温下风干。在完全干燥之前不要使用。
- 关于音频 Strap 的清洁
清洁过程中注意避开电源接口以及扬声器网,防止进水。可以用干棉签清洁扬声器网。
- 关于抛光布的清洁
如果抛光布掉落在室外或肮脏的物品表面上后,请勿在彻底清洁抛光布前使用它来清洁任何设备、配件。抛光布应根据需要进行机洗和烘干或者进行手洗和自然风干。
建议平时将超细纤维布(如抛光布等)存放在干净的袋子中。
- 其他配件清洁过程较简单,请参考官网。
其他任何损坏,维修费用是 2,399 美元(如果加购了 AppleCare+ 则依然是 299 美元)
Code
GodotVision- 帮你在 Goddot 上开发 visionOS!
关键词:Gotdot,visionOS
你是否还记得我们在 001 中提及到的 Godot 吗?最近,kev 已经尝试在 Godot 上做了一些 简单的尝试,利用 GodotVision 这个项目,kev 成功地利用 Godot 将一个简单的 HelloWorld 工程跑在了 visionOS 上。
不过,尽管基本路径验证成功,但目前这个项目并不是官方的支持,并且项目当前还有很多的局限性,例如文档的缺失、缺乏骨骼模型、着色器以及粒子系统等。
还好,kev 也给出了比较清晰的一个 路径图 去指导下一步的开发方向,如果你对 Godot 以及 visionOS 开发感兴趣,非常建议你从 Github 上拉取这个项目来一起和作者探究更多的可能性。
Small News
Apple Vision Pro 的退货率真的很高吗?
关键词:Apple Vision Pro、Return Policy
也许你已经在网上看到一些关于 “第一批购买 Apple Vision Pro 的用户已经开始大量退款” 的新闻,不过在 Mike Wuerthele 的 这篇文章 中,他通过对一些 Apple Store 员工的走访,了解到 2.16 之前(这个日期是第一批购买的用户可以退货的最后截止日期),Apple Vision Pro 的退款数量并没有比其他新产品多更多,首批退款的用户主要是两种人:
- Youtubers,大部分 Youtubers 都会把新品的退货机会当做是免费的租赁手段
- 佩戴后产生不适的用户
本期贡献者
Link | Image |
---|---|
我就是御姐我摊牌了 | |
章子飏 | |
SketchK | |
镑镑 |