Niantic工程主管采访:高斯溅射的应用潜力以及AR时代的挑战

IP归属:广东

编译/VR陀螺

Niantic是一家AR企业,曾与任天堂和宝可梦公司联合开发了现象级的AR手游《宝可梦Go》。除此之外,该企业还开发了《Ingress》、《Pikmin Bloom》和《Peridot》等游戏。2023年,Niantic与Capcom合作推出《怪物猎人Now》,如今在全球收获了超过1000万次下载。

除游戏外,Niantic在AR行业还多有布局,如曾收购了6d.ai、8th Wall等AR公司,现如今,Niantic还在打造一个名为Lightship的AR开发平台。

2021年,Niantic收购了3D扫描应用程序Scaniverse背后团队,今年3月,Scaniverse进一步引入”高斯溅射“技术,它使得使用手机快速生成高质量3D模型成为了可能。

为什么Scaniverse目前会采用免费的策略、Niantic的AR业务线之间又有何关联?近日,外媒MoguraVR对Niantic工程高级副总裁/工程主管Brian McClendon(昵称Bam)进行了独家采访,并揭示了Niantic的未来AR规划。

Brian McClendon,图源:MoguraVR

高斯泼溅是一种极具潜力的3D扫描技术

问:请给我介绍一下本次Scaniverse更新中所添加的名为“Gaussian Splatting”(高斯泼溅)的新功能。

Bam:高斯泼溅是Scaniverse的一项突破性功能。早些时候,该应用需要借助iPhone的LiDAR传感器进行高质量3D扫描,而2023年以后,应用进一步支持以摄影测量的方式生成3D模型。后者在生成速度方面会优于前者,但是依然需要一定时间。

现如今,借助高斯泼溅,用户大约1分钟内即可扫描一个空间并生成漂亮的3D模型,此外,该模型还具备了传统网格处理无法实现的照明和透明效果。

(以下是基于高斯溅射所截取的画面,与传统3D扫描相比,光反射的再现性更高,也更容易看到玻璃的透明度。)

问:目前市面上已经存在各种3D扫描应用,Scaniverse有何不同?

Bam:很多其他应用都需要基于云处理以生成3D模型,即扫描-上传数据-云端建模-下载,因而它们的成本多以使用费的形式转嫁给用户。

而Scaniverse从一开始就专注于本地生成,它不需要借助云端,也没有额外的处理成本,这也是我们可以免费使用的重要原因。

此外,我们创建的模型可以以多种格式导出并共享,如可用于游戏开发、SNS分享、视频创作等。

当然,在本地生成的同时还要保障处理速度和质量其实并不容易,这也是我们未来努力的方向,我们的目标是创建一个每个人都可以轻松使用扫描技术的世界,因而我们对基于本地以及免费使用的承诺依旧坚定不移。

问:3D扫描是一种新的用户体验,它未来的价值体现在哪些方面?

Bam:的确,3D扫描是一种新的体验,它可能是照片或者视频的另一种维度,我们需要发挥创造力,以让用户更好获取数据并进一步了解它的价值。

如对婴儿或宠物等静止物体进行3D扫描也是一种捕捉记忆的有效手段,当你20年后再回看,你自然会有不同的体验跟感受。

问:Scaniverse未来的路线图是什么?

Bam:我们目前还没有正式公布,不过这背后确实还需要进行大量的工作。比如,尽可能让应用与更多设备兼容、进一步提升质量等。未来,我们甚至设想可以像《宝可梦Go》一样,基于玩家访问地点的数据构建3D世界地图。

此外,我们还在考虑将Scaniverse与Lightship ARDK for Unity和8th Wall for the web等平台打通,使得AR开发者能够更好利用这些3D扫描数据。

Niantic的WebXR业务以及裁员风波

问:目前Niantic拥有多条AR业务线以及游戏线,公司是如何把它们有机串联起来的?

Bam:Niantic的一个重要议题是如何利用好3D对象,目前我们正在开发一套工具,基于Unity和Web平台,在室内和室外实现大规模3D对象和基于位置的交互体验。

如果说视觉定位系统(VPS)是一张“看不见的世界地图”,那么高斯泼溅就是一张“可视化的3D世界地图”,它不仅适用于智能手机AR,同样适用于未来AR眼镜的沉浸式体验。我们的角色是构建一个平台基础设施,使得软件开发人员能够将这些3D数据融入它们的体验当中。

问:如何看待最近日产、伊藤园等公司在《宝可梦Go》中推出了使用“8th Wall”AR技术的营销广告?(注:8th Wall是一个WebAR平台)

Bam:与APP相比,基于浏览器运行的一大优势在于它可以实现快速迭代和改进,即便某些功能不起作用,我们也可以通过更新JavaScript快速修复相关问题。

《宝可梦Go》引入WebAR广告形式,它的好处在于可以将广告调整部分留给广告团队,因而广告对应用本身的影响可以降到最低。

(下图是日产在《宝可梦Go》游戏中投放的广告,当用户点击游戏屏幕上地图出现的气球广告,即可生成AR模型,并实现多角度观看)

问:目前《宝可梦Go》中有一项实地研究任务“PokéStops”也需要涉及3D扫描,它与Scaniverse是否有所关联?

Bam:实际上,《宝可梦Go》扫描功能的代码就是Scaniverse子程序的模块化版本,我们使用相同的技术来收集数据。不过《宝可梦Go》并没有使用高斯溅射技术,它会上传扫描数据,以帮助建立VPS。

此外,《Ingress》还曾推出了一项名为 "AR Hack"的功能,它可加深VPS在门户中的使用,证明玩家确实访问过该地点并享受身临其境的AR体验。该功能推出不到六个月,就已经成为了游戏基本玩法的一部分,深受用户欢迎。

AR Hack功能,图源:网络

问:终极的AR,比如AR眼镜体验,还需要相当长一段时间才能实现,对此Niantic的长期战略是什么?

Bam:我们希望能让尽可能多的人使用我们的平台。目前基于Unity的工具是免费提供的,如果大规模使用,我们可能会单独讨论服务器成本,无论如何,我们都希望更多开发人员参与其中。

另一边,8th Wall需要收取使用费,不过我们正在寻找更多开发者能够承受的定价。此外,我们还在不断尝试推出各种易于体验并能真正有助于解决实际业务问题的功能。

问:Niantic在2023年进行了裁员,这对企业是否产生了相应的影响?

Bam:2023年是艰难但又值得学习的一年,我们经历了裁员,整个公司更专注于《怪物猎人Now》的推出和后续成功的机会。某方面而言,我觉得Niantic因此成为了一家更强大的公司,类似的措施不太可能在不久的将来实施。

来源:https://www.moguravr.com/niantic-ar-bam-interview/

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

VR陀螺专栏: https://www.tuoluo.cn/columns/author1286744/

本文网址: https://www.tuoluo.cn/article/detail-10112065.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章