iPhone 3D 扫描仪应用程序 Capture 暗示了增强现实的未来

捕获 3D 扫描 iphone 2

3D 扫描仪不一定要花一大笔钱:事实证明,您的口袋里可能已经有一台了。一个名为 Capture 使用 X 系列 iPhone 上的 TrueDepth 传感器制作小物体的原始 3D 模型,然后您可以通过增强现实将其放入不同的设置,或通过 iMessage 或其他方式与其他人分享。

或者让我们这样说:通过 Capture,我可以使用 iPhone XS Max 扫描 Macworld 旧款 Macintosh SE 的 3D 模型,小心地扫描我能到达的每个角度(或直到超时)。完成后,我可以在应用程序内翻转和旋转 3D 模型,就像旧 Mac 是视频游戏中的道具一样。我还可以将其发送给朋友,然后她就可以使用 iPhone 的摄像头通过增强现实查看它在自己办公桌上的样子。即使她的 iPhone 7 没有内置 TrueDepth 传感器,这也适用。

macintoshse Leif Johnson/IDG

桌子上真正的Macintosh SE在左边的照片中,而我”放置”在桌子上的AR版本在右边。不幸的是,在 AR 中使用时,扫描结果始终是无色的。

听起来很革命,对吧?唉,目前它看起来就像饼干一样基本,这就是为什么你可能没有听说过它。就连开发商 Standard Cyborg 的宣传图片看起来也像是在《复仇者联盟:无限战争》结尾时被瓦解的。与许多其他扫描应用程序一样,您永远无法使用 Capture 的当前版本制作真正的 3D 模型。即使我可以对物体的一侧进行良好的扫描,我也无法扫描它的底面。

面向前方

但不要为此责怪标准机器人。 Capture 的尴尬源于 TrueDepth 传感器的当前设计,该传感器只能从几英寸外读取面部信息。这意味着只有当您手里拿着东西(或扫描您的脸部)时,Capture 才能正常工作,因为 iPhone 的前置摄像头上仅配备 TrueDepth 传感器。

如果您尝试以与使用后置摄像头拍摄视频相同的方式扫描某些内容,那么您将是盲目扫描,仅由细微的振动引导,这让我想起 Apple Watch 上的通知点击。如果您移动得太快,Capture 会结束扫描。结果,我的完成扫描文件夹看起来就像一个抓包,里面装满了更多的技巧而不是零食。坦率地说,如果标准机器人为此收取任何现金,我会很生气。

但据 Standard Cyborg 联席首席执行官 Garrett Spiegel 称,这仍然比竞争对手的应用程序更好。在 Twitter 上的一次对话中,斯皮格尔告诉我,大多数竞争应用程序都是由缺乏公司风险融资的爱好者和具有计算几何或计算机视觉经验的工程师开发的。他说,这些应用程序通常速度缓慢且不稳定,而且它们的设计非常糟糕,甚至会导致 iPhone 发热。

“相比之下,我们的算法的编写方式使我们的应用程序每秒处理超过 30 帧(是次佳应用程序的两倍多),这意味着扫描更加无缝,类似于仅拍摄全景图(并且速度已经越来越快了),”Spiegel 说道。

Spiegel 还强调了 Standard Cyborg 与机器学习模型的集成云存储系统,这使得将 Capture 扫描导入其他应用程序变得很容易。

Capture 是免费的,因此我可以将其视为突出 TrueDepth 潜力的新奇事物。毕竟,TrueDepth 是苹果最近最伟大的创新之一:一种面部识别技术,可以将激光喷射到每个凹坑和裂缝中,而 Capture 的图像提醒我们,TrueDepth 的工作原理有点像盲人通过触摸”看到”。这使得它比我们从三星等竞争对手那里获得的基于照片的面部识别系统领先多年。直到最近,华为和小米才推出了构成严重竞争的红外扫描仪。

增强 AR

但 Capture 还表明,3D 扫描可能是让增强现实像苹果公司明确希望的那样流行的途径,特别是当苹果公司弄清楚如何让 TrueDepth 与后置摄像头配合使用时。到目前为止,苹果(以及其他所有人)一直在努力向我们展示 AR 的实际应用:我们得到的最好的结果是逼真的解剖应用或需要太多运动的游戏。

但是请允许我一下。我们在 Capture 中看到的扫描技术预示着未来,我可以将一个神秘汽车零件的 3D 模型扫描给我的父亲,然后他就可以将它与他的旧福特野马的发动机重叠,看看它是否适合。或者,根据季节,我可以将圣诞树装饰扫描给我的女朋友,然后她就可以在家里告诉我它是否像我想象的那么好。这是为人们服务的 AR。

对于 Spiegel,他设想开发人员使用 Capture 的扫描技术来开发应用程序,帮助消费者确定特定品牌的鞋子尺码,或找到最适合自己鼻子形状的眼镜。就此而言,他认为 Capture 背后的技术可用于创建游戏虚拟化身。

捕获应用程序扫描工具 Leif Johnson/IDG

Capture 的扫描正在进行中。从技术上讲,Macintosh SE 太大,无法进行良好的扫描,因此它的表现给我留下了深刻的印象。

目前这还只是科幻小说,但我认为我们距离现实并不太远。与 彭博甚至在 2017 年提出,我们最早可以在 2019 年在 iPhone 后置摄像头中看到 3D 传感器,尽管来自值得信赖的分析师郭明池等人的最新报告推迟了这一日期。但 Spiegel 表示,如果 AR 想要变得更受欢迎,就需要实现这一点。

“我们不确定这会在什么时候发生,但它似乎一定会发生,”他指的是后置摄像头的 3D 扫描技术。 “目前还不清楚他们将使用哪种技术(TOF、VCSEL 等),但很明显,当前的被动 AR 方法(例如挥动手机来使用它)不会解决这个问题。”

至少,Capture 让我们想起了 TrueDepth 的强大之处。 Animoji 和 Memoji 几乎表明 TrueDepth 具有类似功能,但即便如此,大多数人也只有在解锁手机或使用 Apple Pay 或肖像模式时才会意识到这一点。即便如此,幕后的魔力也并不明显。

但像 Capture 这样的技术可以扭转这一局面。该功能也可能使 iPhone X 和 iPhone XS 等手机比现在更受欢迎。

“我们认为这款传感器对消费者来说是一个巨大的胜利,随着这些实际应用程序的推出并在未来几个月内成为主流,它将说服许多消费者升级或改用配备 FaceID/TrueDepth 的 iPhone,”Spiegel 说。