3

Niantic工程主管采访:高斯溅射的应用潜力以及AR时代的挑战

 4 weeks ago
source link: https://www.vrtuoluo.cn/539623.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

Niantic工程主管采访:高斯溅射的应用潜力以及AR时代的挑战_VR陀螺

1660873568898%E5%BE%AE%E4%BF%A1%E5%9B%BE%E7%89%87_20220819094503.jpg
推广
Niantic工程主管采访:高斯溅射的应用潜力以及AR时代的挑战
发布时间:2024-04-09 09:55  |  标签: Niantic 8th Wall 3D扫描 Lightship 高斯泼溅

编译/VR陀螺

Niantic是一家AR企业,曾与任天堂和宝可梦公司联合开发了现象级的AR手游《宝可梦Go》。除此之外,该企业还开发了《Ingress》、《Pikmin Bloom》和《Peridot》等游戏。2023年,Niantic与Capcom合作推出《怪物猎人Now》,如今在全球收获了超过1000万次下载。

除游戏外,Niantic在AR行业还多有布局,如曾收购了6d.ai、8th Wall等AR公司,现如今,Niantic还在打造一个名为Lightship的AR开发平台。

2021年,Niantic收购了3D扫描应用程序Scaniverse背后团队,今年3月,Scaniverse进一步引入”高斯溅射“技术,它使得使用手机快速生成高质量3D模型成为了可能。

为什么Scaniverse目前会采用免费的策略、Niantic的AR业务线之间又有何关联?近日,外媒MoguraVR对Niantic工程高级副总裁/工程主管Brian McClendon(昵称Bam)进行了独家采访,并揭示了Niantic的未来AR规划。

171262714164501.png
Brian McClendon,图源:MoguraVR

 高斯泼溅是一种极具潜力的3D扫描技术 

问:请给我介绍一下本次Scaniverse更新中所添加的名为“Gaussian Splatting”(高斯泼溅)的新功能。

Bam:高斯泼溅是Scaniverse的一项突破性功能。早些时候,该应用需要借助iPhone的LiDAR传感器进行高质量3D扫描,而2023年以后,应用进一步支持以摄影测量的方式生成3D模型。后者在生成速度方面会优于前者,但是依然需要一定时间。

现如今,借助高斯泼溅,用户大约1分钟内即可扫描一个空间并生成漂亮的3D模型,此外,该模型还具备了传统网格处理无法实现的照明和透明效果。

(以下是基于高斯溅射所截取的画面,与传统3D扫描相比,光反射的再现性更高,也更容易看到玻璃的透明度。)

171262731479002.png

问:目前市面上已经存在各种3D扫描应用,Scaniverse有何不同?

Bam:很多其他应用都需要基于云处理以生成3D模型,即扫描-上传数据-云端建模-下载,因而它们的成本多以使用费的形式转嫁给用户。

而Scaniverse从一开始就专注于本地生成,它不需要借助云端,也没有额外的处理成本,这也是我们可以免费使用的重要原因。

此外,我们创建的模型可以以多种格式导出并共享,如可用于游戏开发、SNS分享、视频创作等。

当然,在本地生成的同时还要保障处理速度和质量其实并不容易,这也是我们未来努力的方向,我们的目标是创建一个每个人都可以轻松使用扫描技术的世界,因而我们对基于本地以及免费使用的承诺依旧坚定不移。

问:3D扫描是一种新的用户体验,它未来的价值体现在哪些方面?

Bam:的确,3D扫描是一种新的体验,它可能是照片或者视频的另一种维度,我们需要发挥创造力,以让用户更好获取数据并进一步了解它的价值。

如对婴儿或宠物等静止物体进行3D扫描也是一种捕捉记忆的有效手段,当你20年后再回看,你自然会有不同的体验跟感受。

171262734022403.png

问:Scaniverse未来的路线图是什么?

Bam:我们目前还没有正式公布,不过这背后确实还需要进行大量的工作。比如,尽可能让应用与更多设备兼容、进一步提升质量等。未来,我们甚至设想可以像《宝可梦Go》一样,基于玩家访问地点的数据构建3D世界地图。

此外,我们还在考虑将Scaniverse与Lightship ARDK for Unity和8th Wall for the web等平台打通,使得AR开发者能够更好利用这些3D扫描数据。

 Niantic的WebXR业务以及裁员风波 

问:目前Niantic拥有多条AR业务线以及游戏线,公司是如何把它们有机串联起来的?

Bam:Niantic的一个重要议题是如何利用好3D对象,目前我们正在开发一套工具,基于Unity和Web平台,在室内和室外实现大规模3D对象和基于位置的交互体验。

如果说视觉定位系统(VPS)是一张“看不见的世界地图”,那么高斯泼溅就是一张“可视化的3D世界地图”,它不仅适用于智能手机AR,同样适用于未来AR眼镜的沉浸式体验。我们的角色是构建一个平台基础设施,使得软件开发人员能够将这些3D数据融入它们的体验当中。

问:如何看待最近日产、伊藤园等公司在《宝可梦Go》中推出了使用“8th Wall”AR技术的营销广告?(注:8th Wall是一个WebAR平台)

Bam:与APP相比,基于浏览器运行的一大优势在于它可以实现快速迭代和改进,即便某些功能不起作用,我们也可以通过更新JavaScript快速修复相关问题。

《宝可梦Go》引入WebAR广告形式,它的好处在于可以将广告调整部分留给广告团队,因而广告对应用本身的影响可以降到最低。

(下图是日产在《宝可梦Go》游戏中投放的广告,当用户点击游戏屏幕上地图出现的气球广告,即可生成AR模型,并实现多角度观看)

171262738982004.png

问:目前《宝可梦Go》中有一项实地研究任务“PokéStops”也需要涉及3D扫描,它与Scaniverse是否有所关联?

Bam:实际上,《宝可梦Go》扫描功能的代码就是Scaniverse子程序的模块化版本,我们使用相同的技术来收集数据。不过《宝可梦Go》并没有使用高斯溅射技术,它会上传扫描数据,以帮助建立VPS。

此外,《Ingress》还曾推出了一项名为 "AR Hack"的功能,它可加深VPS在门户中的使用,证明玩家确实访问过该地点并享受身临其境的AR体验。该功能推出不到六个月,就已经成为了游戏基本玩法的一部分,深受用户欢迎。

171262744971505.png
AR Hack功能,图源:网络

问:终极的AR,比如AR眼镜体验,还需要相当长一段时间才能实现,对此Niantic的长期战略是什么?

Bam:我们希望能让尽可能多的人使用我们的平台。目前基于Unity的工具是免费提供的,如果大规模使用,我们可能会单独讨论服务器成本,无论如何,我们都希望更多开发人员参与其中。

另一边,8th Wall需要收取使用费,不过我们正在寻找更多开发者能够承受的定价。此外,我们还在不断尝试推出各种易于体验并能真正有助于解决实际业务问题的功能。

问:Niantic在2023年进行了裁员,这对企业是否产生了相应的影响?

Bam:2023年是艰难但又值得学习的一年,我们经历了裁员,整个公司更专注于《怪物猎人Now》的推出和后续成功的机会。某方面而言,我觉得Niantic因此成为了一家更强大的公司,类似的措施不太可能在不久的将来实施。

来源:https://www.moguravr.com/niantic-ar-bam-interview/

投稿/爆料:[email protected]

稿件/商务合作: 六六(微信 13138755620)

加入行业交流群:六六(微信 13138755620)

版权申明:本文为VR陀螺原创,任何第三方未经授权不得转载。如需转载请联系微信:vrtuoluo233 申请授权,并在转载时保留转载来源、作者以及原文链接信息,不得擅自更改内容,违规转载法律必究。文中有图片、视频素材来自互联网或无法核实出处,如涉及版权问题,请联系本网站协商处理。

kj_50.jpg

元宇宙数字产业服务平台

下载「陀螺科技」APP,获取前沿深度元宇宙讯息


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK