Google XR Blocks 0.22.0发布:初步支持WebGPU,新增Gemma 4端侧AI及空间交互功能

IP归属:广东

文章AI导读

一键萃取文章精髓,核心观点即刻呈现

编译/VR陀螺

近日,Google旗下开源XR开发工具库XR Blocks发布0.22.0版本,新增对WebGPU渲染的初步支持,同时引入多项端侧AI演示功能,并对空间UI组件、桌面模拟器及开发工具链进行升级。

根据官方更新日志,此次更新首次在XR Blocks桌面模拟器中支持three.js的WebGPURenderer,模拟器的深度处理、深度遮挡及相关渲染模块已初步适配WebGPU,开发者可以通过相关示例测试新的图形渲染能力。不过,Google指出,目前XR Blocks的空间UI组件尚未支持WebGPURenderer,因此现阶段仍属于模拟器层面的初步适配,尚未实现完整的端到端支持。

AI方面,新版本增加了多项端侧运行示例,包括能够结合空间场景上下文生成回答的Gemma 4助手、端侧图像超分辨率、基于EfficientSAM的圈选搜索,以及离线空间场景描述和翻译功能。此外,XR Blocks还将3D物体识别流程中的SlimSAM替换为基于LiteRT运行的EfficientSAM-Ti,并新增照片转3D、单目照片生成世界坐标对齐深度信息等演示。

在空间交互方面,此次更新新增可滚动视图、可编辑文本框及支持调整尺寸的卡片组件,同时优化图标渲染方式,以减少绘制调用次数。开发者还可以通过新增的生成式AI示例,将AI生成的虚拟物体放置在真实环境表面,并利用ArUco标记追踪功能实现虚实物体定位。

此外,桌面模拟器新增昼夜光照模式及独立性能分析工具,Roomcraft示例加入跨设备协作功能。底层工具方面,XR Blocks将Gemini模型调用迁移至Interactions API,默认Flash模型更新为Gemini 3.8 Flash,并将three.js升级至r186版本。

不过,Google尚未公布上述端侧AI功能在具体XR设备上的运行性能、延迟或兼容性数据,相关功能目前主要面向开发者测试与原型验证。

来源:Github

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

VR陀螺专栏: https://www.tuoluo.cn/columns/author1286744/

本文网址: https://www.tuoluo.cn/article/detail-10131455.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章