向应用添加 3D 模型

在处理 3D 模型时,Jetpack XR SDK 支持 glTF 2.0 开放标准。当 Android XR 渲染使用 Jetpack XR SDK 构建的应用时,将使用 glTF 2.0 标准(以及受支持的 extensions)中指定的基于物理的渲染 (PBR) 技术渲染 3D 模型。大多数数字内容创作 (dcc) 工具(例如 Autodesk MayaMaxon ZBrushBlenderSpline)都可以将 3D 模型导出为 glTF 格式(.gltf.glb 文件)。

如果用户或您的应用指定了 SpatialEnvironment 天空盒,3D 模型将使用环境天空盒提供的照明信息进行照明。反射性材质和镜面高光也会反射环境天空盒。如果已启用透视功能,则光照、反射和镜面高光将基于一个简单明亮的房间,其中只有一个定向光源。

如需快速浏览支持的材质,请参阅 Khronos 网站上的 glTF PBR 属性

使用 Jetpack XR SDK 构建的应用可以通过两种主要方式加载 3D 模型。

将 3D 模型放入 ActivitySpace

获得 glTF 文件后,下一步是将其添加到 Android Studio 中的 assets 目录。我们建议您创建一个 models 目录,以便更好地整理资产类型。

将资源添加到 /models 目录的示例

如需加载 glTF 模型,请调用 createGltfResourceAsync

// load the gltf file
val gltfModel = xrSession.createGltfResourceAsync("models/saturn_rings.glb").await()

此时,模型已加载到内存中,但尚未呈现。如果您要加载的 3D 模型很多或模型很大,最好提前异步加载这些模型。这样,用户就不必等待模型加载到内存中。

我们需要将 glTF 添加到 ActivitySpace。调用 createGltfEntity 以创建实体并将其放入 ActivitySpace。最佳实践是,您应检查应用是否处于允许使用空间功能的状态

// check for spatial capabilities
if (xrSession.getSpatialCapabilities().hasCapability(SpatialCapabilities.SPATIAL_CAPABILITY_3D_CONTENT)){
  // create the gltf entity using the gltf file from the previous snippet
   val gltfEntity = xrSession.createGltfEntity(gltfModel)
}

现在,当您运行应用时,应该会看到已加载的 3D 模型。

加载的 3D 模型示例

将 3D 模型放入 Compose 卷

虽然您仍然需要使用 createGltfResourceAsync 将 glTF 加载到内存中,但如果您使用 Jetpack Compose for XR 创建界面,则可以将 3D 模型放入 Volume 中。请参阅使用容积在布局中放置 3D 对象

为 3D 模型添加动画

根据 glTF 规范,3D 模型可以嵌入动画。Jetpack XR SDK 支持骨骼(绑定)、刚性、变形目标(混合形状)动画。系统还支持使用 KHR_animation_pointer glTF 扩展创建的 Material 动画。

如需播放动画,请调用 startAnimation 并指定动画的名称。您可以选择是否指定动画是否应无限循环。

//start a looping walk animation for a model
gltfEntity.startAnimation(loop = true, animationName = "Walk")

再次调用 startAnimation 时,当前动画将停止,并开始播放新动画。

您可以通过 getAnimationState() 查询动画的当前状态。

如果调用 startAnimation() 时指定的动画名称不存在,该调用将静默失败,所有正在运行的动画都会停止,并且 getAnimationState() 会返回 STOPPED

使用 Scene Viewer 加载 3D 模型

如果您希望以最简单的方式加载具有基本互动功能的 3D 模型,可以选择像在移动设备上一样使用场景查看器。Android XR 和移动设备上的 Scene Viewer 之间的一个关键区别在于,Scene Viewer 仅支持指向 glTF 文件的文件 URI 参数,并会忽略所有其他参数。

Scene Viewer 是一个单独的应用,通过 intent 调用并在全空间模式下运行。因此,当您调用它时,您的应用将不再可见,Scene Viewer 将获得焦点。您之前更改的所有环境都将重置为用户的系统偏好设置。

下面是一个使用 Intent 在 Android XR 上的 Scene Viewer 中查看 glTF 文件的示例:

val THREED_MODEL_URL = "https://raw.githubusercontent.com/KhronosGroup/glTF-Sample-Models/master/2.0/FlightHelmet/glTF/FlightHelmet.gltf"
val MIME_TYPE = "model/gltf-binary"
val sceneViewerIntent = Intent(Intent.ACTION_VIEW)
val intentUri =
  Uri.parse("https://arvr.google.com/scene-viewer/1.2")
     .buildUpon()
     .appendQueryParameter("file", THREED_MODEL_URL)
     .build()
sceneViewerIntent.setDataAndType(intentUri, MIME_TYPE)
startActivity(sceneViewerIntent)

如需详细了解 Scene Viewer 的交互选项,请参阅我们的 3D 模型设计文档

glTF 扩展

Jetpack XR SDK 支持多种 gfTF 扩展,可扩展 3D 模型的功能。您可以通过 GltfEntity 和场景查看器使用这些功能。