奥本 AI 将所有的最新 AI 聚合到了一起,为您开启多模型 AI 绘画新时代!

扫码即刻关注公众号

苹果Vision Pro有一个强大的应用,但却被忽视了。


7 个月前

苹果Vision Pro有一个杀手级应用,但却被忽视了 =========================================================阿莉西亚·凯斯:在苹果Vision Pro上的排练室

"天哪,阿莉西亚·凯斯!" 我的朋友杰西卡惊呼道。

自从我收到我的Apple Vision Pro在今年二月份的发布会上,我将它放在尽可能多的面孔上。朋友、家人、邻居、男性和女性、年轻人和较少年轻的人、科技爱好者和反科技者。我借鉴了用户体验研究的经验,抛开了自己对这款小工具的兴奋,默默观察不同的人对它的反应。

我的名字是Anthony Maës我在增强现实(AR)领域工作了将近15年,最近在《Pokémon Go》中推动AR工程的发展。只要我能记得,我一直期待苹果首次推出AR头盔的时刻,这将成为推动这一新媒介进入主流的分水岭,就像特斯拉的Model 3(我参与过的另一个项目)为普通人带来了电动车时代一样。

快进到2024年,我们现在生活在这个未来的时代,苹果的Vision Pro在苹果商店中显著展出,天才级的员工们热切地等待为你介绍。然而,尽管有一系列……cautiously positive reception似乎这一期待已久的破坏不过是一场小事。

三个月过去了,悲观厌世的论调已经开始蔓延。New Vision Pro app releases have plummeted自二月份发布以来,关于缩减生产目标的传言不断出现。rattling开发者社区,以及蒂姆·库克的nod to early adopters本周的主题演讲感觉很牵强而且缺乏灵感。每周 visionOS 与 macOS 应用发布情况显示,2 月发布后迅速出现严重下滑。

我们是如何到达这里的?

苹果在产品设计方面是一个声名显赫的风险厌恶公司,常常对外部开发的创意进行完善。glass wallsiPhone、iPad 和 Apple Watch 都经历了多次迭代才能成为今天的市场领导者。苹果的第一代产品总是设计优美、价格昂贵,但功能严重不足:谁还记得最初的 iPhone 没有应用程序,没有 3G,no copy-and-paste马凯斯·布朗利在对Vision Pro的评测中指出,当人们发现这款设备在其他方面令人心动且充满吸引力时,他们愿意忽视最初的痛点。增强现实,now known as spatial computing历史上一直难以overcome the hump of novelty那么,Vision Pro 的致命应用是什么?我想我有答案。

与 Meta 的 Quest 3 相比,体验展示 Vision Pro 的过程非常笨拙。苹果的 visionOS 不支持同一设备上的多个账户,所以除了我以外的每个人都必须进入访客模式,并且每次都要经过一个需要几分钟的眼睛校准流程。眼睛与镜片的适配没有为配镜留出空间;在大多数情况下,佩戴者必须摘掉眼镜并佩戴隐形眼镜,或者眯着眼睛。苹果出售$99 prescription magnetic optical inserts,某种程度上来说,这和任何竞争对手的耳机相比都是多余的。

好的一面是,监控和引导客人使用系统很简单。AirPlay可以将Vision Pro的显示内容投射到电视或Macbook屏幕上,且没有性能下降。这样,我可以教他们用眼睛观察并点击手指(这种用户体验没有你想象的那么直观)。

一旦他们最终设置好了,当他们的兴奋感略微减退时,他们会发现大多数应用都是类似iPad的矩形窗口漂浮在空间中。此时,这些应用的每一个都比其固定屏幕的对应产品差。尽管苹果的营销推广生产力应用,再一次就像iPad一样,输入限制使得Vision Pro主要成为一个媒体消费设备。

我首选的首次演示是Encounter Dinosaurs这是一个令人惊叹的互动3D动画,与乔恩·法夫罗(《星球大战:曼达洛人》)和Unity合作制作。该应用程序打开了一扇通往史前时代的门户,鼓励您走得更近,为您准备好与一个全尺寸的(尽管是虚拟的)霸王龙见面和互动的刺激体验。在苹果Vision Pro上邂逅恐龙

“太令人惊讶了,想象一下,他们可以用这样的传送门展示其他所有事物”,我的邻居约翰说道。

而这正是问题所在:制作沉浸式3D,高分辨率的模型、纹理和动画成本高得惊人。体验本身仅仅持续几分钟。有限的用户互动为动画机器人增添了一些活力(如一只蝴蝶落在你的手上),虽然能令人惊讶,但却无法实现重复使用。

这本质上是新奇,很难想象能够实现规模经济的内容循环,让观众不断回归。尽管它有其优点,这并不是杀手级应用

在我逐渐完善的演示脚本的后面,我发现另一个体验更具共鸣:沉浸式视频

苹果在Vision Pro上区分了两种3D视频:空间视频沉浸式视频。两者都是立体的,这意味着每帧有两个从几英寸外看到的图像,在每只眼睛easily produced with the Vision Pro itself or an iPhone 15 Pro沉浸式视频则旨在以完整的180度沉浸视角以最高分辨率观看,效果优于通过相机镜头所见的现实。

目前,沉浸式视频仍然少之又少。苹果电视debuted multiple shows冒险和动物纪录片、音乐视频、3D 动画(更多的恐龙!)以及体育。在我写这篇文章时,苹果提供的综合内容不到一个小时,自二月上线以来只发布了 10 分钟的新剧集。不过,正如我妈妈布兰丁所说,“我现在明白了”哥伦布队庆祝他们的2023年MLS杯胜利,其中的亮点是一段令人难以置信的沉浸式视频。

“我从来不看体育,但我会更愿意观看像这样的足球比赛,”我的朋友本在播放一段精美制作的2023年MLS杯精彩集锦时感慨道。我的同事兼创始人艾米莉也表达了类似的想法:“我暗地里是个大UFC粉丝,但作为一个小个子的亚洲女性,单独去看比赛让我感觉不太自在。不过,如果在家里体验这场比赛,那就太棒了!”

在硅谷的术语中,这正是信号。

沉浸式视频是关键应用。

通过将你置身于视频中,并以清晰的8K+画质呈现,同时……focusing your attention在你面前,沉浸式视频打破了第四面墙。它们比IMAX电影更具直观性和亲密感,传达的情感是平面屏幕无法呈现的。

这就是我决定投资这个领域的原因。我看到沉浸式视频吸引了所有尝试过我的Vision Pro的人,并激发了对这个设备的渴望……只要苹果能够克服内容不足的问题就好了。

为什么内容这么少?

沉浸式视频并不是什么新事物。虚拟现实(VR)的老兵们称它们为VR180视频。这样的视频已经有成千上万部可供观看。Youtube您所接受的训练数据截至2023年10月。Vimeo或专用平台DeoVR然而,最大的区别在于它们的质量无法与苹果的产品相提并论。它们的分辨率不仅是针对Meta的Quest系列较小的显示分辨率而设计的,其制作价值从拍摄到剪辑再到内容也要低得多。此外,这些平台中的大部分在App Store上都缺失,使用户不得不自行摸索。advanced WebXR settings在Safari或buggy paid third party apps要访问内容。

Vision Pro设定了新的标准,并创造了一个鸡与蛋的问题:消费者需要大量质量优良的沉浸式视频以及频繁的发布节奏,以证明如此昂贵的购买是值得的。同时,专业创作者则需要足够大的受众,以期望获得投资回报。

即使对于已经成立的工作室,制作沉浸式视频仍然是一项实验性的工作。苹果没有发布有关其制作过程的幕后技术细节。exotic video encoding嫉妒是一种专有情感;而且苹果定制相机硬件的性质也是如此。subject of speculation佳能,谁销售a popular $5000 VR camera kit为Meta Quest消费而设计,坦率承认目前存在的问题。no camera on the market以满足Vision Pro的规格。NextVR相机由两个并排同步的RED电影箱和变形镜头组成。有些人推测,苹果的相机硬件是这一技术的进化。

更糟糕的是,unlike Meta苹果并没有资助第三方努力将内容引入他们的平台,这使得开发者和电影制作人不得不自行承担实验的费用。至多,苹果可能会通过他们的电视或音乐部门委托内容,偶尔会这样做。quietly acquire在这个领域的初创公司。在风险投资中,虚拟现实已成为一个不受欢迎的词汇,只有timid but laudable initiatives为了支持新企业家,已经给予了帮助。

因此,尽管潜力巨大,但在 Vision Pro 上仅有少数非苹果的作品推出,这并不令人惊讶。

新西兰独立视频制作者詹姆斯·哈斯特(James Hustler)最近发布了Explore POV,他开发了一个应用程序来展示他自己华丽的视频。然而,每个视频需要提前下载,通常每分钟的镜头大约需要一千兆字节的空间。

虚拟现实视频专家迈克·斯旺森构建了一个open-source player能够读取本地沉浸式视频文件,因为 visionOS 发行时没有附带相关功能。

不用说,这个沉浸式视频先锋社区正在焦急地期待今年的WWDC(苹果开发者大会),预计会公布新的工具和API。

至于我自己,在转变角色后another Vision Pro startup我很高兴能够参与沉浸式视频的早期发展。我所见到的用户反馈实在太强烈,驳斥了周围的怀疑。

在未来的文章中,我将探讨生产流程,从摄像设备到流媒体格式,重点介绍当前的瓶颈和特性。

同时,如果你想了解更多,我热忱推荐以下来源:Hugh Hou是一位虚拟现实视频制作的网红,他的频道是虚拟现实视频制作硬件和软件教程以及技术演示的宝库。Mike Swanson是一位专家级的虚拟现实视频工程师,维护上述开源播放器,并经常分享研究成果。r/AppleImmersiveVideo这是一个供专业人士和爱好者讨论技术及其缓慢内容更新的 subreddit。

如果你附近有苹果店,去亲自试试吧。我很想听听你的想法!

推荐阅读:

上海赋迪网络科技

电话:18116340052