苹果如何让搭载LiDAR的iPhone成为AR的未来?


    文/ZJ
    说到苹果与AR,许多人想到的都是苹果那个传闻中即将推出的AR眼镜产品,尽管许多人认为头显和眼镜才是AR的未来,但苹果高管向人们展示了iPhone是如何在现在将AR领域推向了现实。
    通过将LiDAR传感器包含在其最新的高端iPhone系列中,苹果表明他们正在认真对待AR。
    
    CNet与苹果公司的AR高管Mike Rockwell以及Allessandra McGinnis进行了座谈,讨论了苹果公司的增强现实计划,包括为何将LiDAR引入iPhone,以及为什么iPhone可能成为AR的未来。
    用户基数与AR的潜力
    苹果公司AR负责人Rockwell表示:“ AR具有巨大的潜力,可以在当今存在的设备以及未来可能存在的设备中为人们的生活提供帮助,但是我们必须确保它能够成功。对我们而言,最好的方法是启用我们的设备生态系统,以便使它成为一个能让人们投入时间和精力,且健康有益的地方。”
    他提出了一个明确的观点:将AR包含在人们将实际使用的多功能设备中,是鼓励AR开发和参与的一种极好的方法。独立设备(例如VR头显)对普通消费者来说还是有门槛,它们不仅价格昂贵,而且还只能提供VR体验。因此,这样的设备并不适合接触广大的消费者。
    Rockwell指出:“对于纯VR或试图做纯AR体验的开发者来说,这是一条艰难的道路。因为并没有多少支持的设备。”
    
    在2017年,苹果在其WWDC大会上推出了ARKit,从此开发人员多了一套可以为iPhone和iPad创建AR内容的工具。也是从此时开始,苹果推出的手机设备开始支持AR功能。CNet指出,在过去三年中,苹果已经售出了数亿部支持AR功能的iPhone和iPad。
    另一方面,iPhone和iPad也使开发人员可以探索更多AR的实用方面。例如宜家和Home Depot等零售商就利用了ARKit的“Quick Look”功能。通过使用零售商推出的手机应用程序,消费者可以将看中的商品摆放在家中查看实际效果,而这一切都是通过AR来实现的。
    
    苹果已经为开发AR付出了很多努力,尤其是在当前新型冠状病毒疫情限制消费者亲临商店进行购物的情况下,AR使人们拥有能够在自己的房屋中预览商品的能力,这为零售商和消费者都带来了好处。
    苹果公司负责AR的高级产品经理McGinnis指出:“ Home Depot发现,人们在AR中查看产品时,转化率较普通的方式提高了2到3倍。”
    苹果的App Store上提供了10000多种支持AR的应用程序,而且许多开发人员也似乎满足于专门为智能手机市场开发内容。以Photoshop和Illustrator之类的程序闻名的Adobe就是其中一员,这家公司表示他们是在追随苹果和谷歌的脚步进行开发,而不是为诸如Facebook的Oculus之类专门的AR/VR硬件开发内容。
    
    Adobe已经针对iOS以及iPadOS推出了其AR创作工具Aero,上个月其还宣布这款工具新增了对macOS以及Windows系统的支持。Adobe Aero允许艺术家创建精确而复杂的AR体验,还可以通过iPhone或iPad在物理环境中进一步完善和预览这些体验。
    在2019年底,Adobe曾从Oculus手中收购了一款VR绘画雕刻应用《Medium》,其将这款应用的相关技术与团队收入囊中,并于今年8月更名为《Medium By Adobe》。但除此之外,Adobe并未推出过专门用于AR/VR头显的创意工具。
    
    Adobe的AR负责人Stefano Corrazza在解释为什么公司除了从Oculus收购《Medium》之外就再没有探索应用于头显的创意工具时说道:“虽然头显设备在我们的产品路线图上,但目前没有一个产品能够满足我们的部署需求。在苹果或谷歌将其头显产品广泛投放市场之前,我们推出适用于头显设备的创意工具并没有多大意义。”
    搭载LiDAR的iPhone意味着什么?
    苹果始终铭记着创意。新的iPhone 12 Pro系列搭载了LiDAR(激光雷达扫描仪),这是以前为新型iPad Pro保留的功能。
    
    激光雷达被用于光探测和测距,它能测量光到达一个物体并反射回来需要的时长。借助机器学习和iOS14的深度信息框架,iPhone能理解人们周围的世界,并建立一个场景的精确深度图形。它能实现物件和房间的扫描、添加照片和视频特效的工作以及为AR物体的精准放置提供技术支撑。
    通过将LiDAR应用在iPhone 12 Pro中,创意人员可以快速扫描现实生活中的物体并创建3D资源,以用于游戏、购物应用等。
    Rockwell表示:“这就是我们将LiDAR扫描仪放在设备上的部分原因。我们认为这是一项关键技术,能够让可用于各种事物的3D资产爆炸式增长。LiDAR的添加也使人们能够以某种方式开始扫描环境,并使创建3D对象变得更加容易。”
    AR的用例也不止于此。事实证明,iPhone可能会在未来的无障碍住宿方面取得飞跃,特别是对于盲人和弱视者。
    Rockwell说道:“我们还有很多事情要做,特别是增强我们对周围环境的了解。我们现在可以认出人,相信在一定的时间范围内,设备也将对环境达到高水平的理解,并将其提供给开发人员。”
    Rockwell认为杀手级应用程序应该是小而实用的,他说道:“某种情况下,用户每天要花3、4、5、6次来做各种事情,而这些都是轻量级的体验。”
    “杀手级应用程序的确将一直以这些轻量级的方式存在,并一直供用户定期使用,这些小方式可以帮助用户完成今天所做的事情,并使它们变得更容易且更快。”
    另外,VR陀螺接下来将会针对苹果Lidar技术进行实测,敬请期待!