苹果正在玩个大的,让开发者用 Siri 做出 AR 应用,几句话变出虚拟场景!

苹果要在 AR 中整合进 Siri 了。

是那个经常犯蠢、搞砸用户请求的 Siri 吗?

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

没错,根据 The Information 报道,苹果正在开发软件,让用户用 Siri 为头显制作程序。

嗯,就是那个传闻中的 xrOS 苹果混合现实头显。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

Siri 整进 AR,苹果在玩个大的

苹果希望,即使是不懂代码的人,也能用 Siri 让头显创建一个完整的 AR 应用。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

并且,这个应用还能放在 App Store 上,供其他用户下载。

想象一下,你可以轻轻松松创建一个应用程序,让一个虚拟的动物在房间里的物体上方移动。

这个过程中,你并不需要从头设计这个动物,对动画进行编程,然后计算它在有障碍物的 3D 空间中的移动。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

如果苹果成功了,这将是 AR 应用开发上的一个重大进步。

目前,AR 应用的开发这条路,并不那么好走。如果没有新鲜的内容,即使是再新的硬件,对用户的吸引力也有限。

虽然这些工具部分针对的是软件开发者,但苹果的野心不止于此,它希望消费者也能使用它们。

就好比苹果的 Final Cut Pro 视频编辑工具,专业人士可以用,消费者也可以用。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

苹果的野心并不是空穴来风。

这背后的技术,来自于苹果在 2017 年收购的一家名为 Fabric Software 的初创公司。

由 Fabric Software 推出的 Fabric Engine 电子游戏引擎,让开发者不仅可以利用算法自动构建环境和模型,还可以用视觉编程系统改变物体、人物和环境的外观。

Fabric 的联合创始人之一 Peter Zion,在收购后就留在了苹果,目前正在领导这个项目。

现在,电影业已经广泛使用程序化生成人或植被,来节省构建计算机生成图像的时间和金钱。

此外,「无人深空」(No Man’s Sky)等游戏,也是通过这种技术来快速制作新的行星、生物和飞船供用户探索。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

如果这么酷炫的技术成功在 AR 上实现了,苹果应该不愁头显的销量了。

为刺激消费,狂整花活

苹果为什么要整这么多花活呢?

显然,苹果推销 AR 设备时,面临着很大的困境,因为人们可以用 AR 做的事实在是太少了。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

另外,为了让用户的钱显得没白砸,苹果也在拼命充实 AR 上的内容。

据内部人士透露,苹果的高管非常看重健康和保健方面的内容,建议 AR 里添加冥想和锻炼的应用。

比如,在一个演示中,用户通过 AR 坐在一个禅宗花园里。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

在另一个演示中,用户在 Dr. Seuss 的绘本「Oh, the Places You’ll Go」中行走,幻想世界与现实世界奇妙地融为一体。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

显然,苹果现在正在遵循着计算机和智能手机的发展路线。

让开发者和其他用户参与进 AR 应用的开发中,就能拓展 AR 设备的使用方式和场景,让它更加普及。

但开发者似乎不太买账

而为了支撑这个野心,苹果已经推出了多个产品。

2017 年,苹果发布了在移动设备上构建 AR 应用的软件 ARKit。

2021 年,苹果发布的 Object Capture 可以根据拍摄的照片自动构建物体的 3D 模型。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

2022 年,苹果发布的 RoomPlan 可以利用摄像头和激光雷达传感器来扫描并生成房间的虚拟平面图。

此外,苹果自己也有一个团队也正在研究如何将现实世界的物体,真实地在头显中通过 3D 还原出来。

看得出来,苹果一直都在鼓励通过 iPhone 和 iPad 进行 AR 相关的开发,但实际上开发者们对此却并没有什么热情。

比如,研究公司 Creative Strategies 在 2021 年调查了 500 多名苹果的开发者之后发现,其中 69% 的人都没有用过 ARKit。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

苹果的秘密团队

据 The Information 报道,一个内部代号为 Z50 的秘密团队正在开发苹果自己的 AR 内容。

这个几十人的团队,驻扎在加州卡尔弗城的一座无名建筑中。

成员主要来自电子游戏行业,他们的任务是根据苹果自己的流媒体服务 Apple TV + 的内容,为头显制作 AR 版本。

不过,相比起 VR / AR 领域时下最流行的游戏,苹果更注重教育和讲故事的体验。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

到目前为止,Z50 团队已经公开发布了一个 AR 应用。

这个基于科幻小说 Apple TV + 系列「For All Mankind」的应用,让粉丝们可以在 AR 中阅读信件、观看幻灯片,甚至还能操纵一台旧的 Apple II 电脑。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

与此同时,苹果在 AR 软件和内容的改善方面,也进行了积极的收购。其中,一部分是为了引进新的人才,而不是技术。

2015 年,苹果同时收购了总部位于慕尼黑为增强现实应用程序制作工具的 Metaio,以及总部位于苏黎世专门从事面部动画和动作捕捉的 Faceshift。

2016 年,苹果收购了 DigitalRune,一家由 Helmut 和 Martin Garstenauer 两兄弟创立的瑞士公司,目标是让用户能够更容易地制作 3D 游戏(该收购此前未被报道)。

2018 年,苹果收购了另一家瑞士公司 Flashwell,该公司利用机器学习让用户可以直接通过照片来搜索物品。

而在 2020 年,苹果收购了两家位于南加州的初创公司:NextVR 和 Spaces,前者提供 VR 体育直播,后者提供 VR 视频会议。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

比起 VR,AR 更难做

苹果忙着给自己的头显融合进 AR 和 VR,它的竞争对手当然也没闲着。

小扎的 Meta 除了推出 Quest VR 头显,还提供了游戏创作应用 Horizon Worlds,允许用户在 VR 中建立简单的 3D 环境,而不需要计算机代码。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

根据某些苹果前工程师的说法,苹果的内容创建工具可以跟 Minecraft 和 Roblox 类比,通过简单的界面,就可以轻松创建自己的 3D 世界。

但是苹果希望这个工具也可以应用在 AR 上,所以它的开发,比 Meta 的 VR 工具更有难度。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

在 VR 中,只要创造一个完全虚拟的世界就好了;但是在 AR 中,虚拟物体是需要叠加在真实世界之上的。

这就留下了重重陷阱。如果 AR 做得不好,用户一旦突然移动,幻觉可能就会被打破,或者看到虚拟世界和现实的物体发生碰撞。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

根据内部人士的说法,苹果一直专注于 AR,对 VR 却没有太大兴趣,因为在苹果的高管看来,VR 太孤立了。

显然,这与 Meta 的做法不同。Meta 一直大力发展 VR 游戏,作为 Quest 头显的一大特色。从 2019 年以来,Meta 已经收购了 9 个 VR 游戏工作室。

苹果狂整花活:嘿,Siri,给我做一个 AR 应用-风君雪科技博客

苹果的开发工具现状如何,还无从得知。

但知情人称,2021 年就看到了演示。

目前,苹果似乎计划将这个工具和头显同时发布,但这取决于软件开发的进度。

参考资料:

  • https://www.theinformation.com/articles/apple-devising-software-to-help-anyone-build-ar-apps-to-drive-headset-sales?rc=epv9gi

  • https://www.theverge.com/2023/1/27/23574328/apple-ar-apps-siri-mixed-reality-headset

本文来自微信公众号:新智元 (ID:AI_era)