揭秘打造 2024 年 CES 展会 AR 体验的方式:由 Geospatial Creator 提供支持的 Android 虚拟导游

二月 08, 2024
Bradford Lee Product Marketing Manager Augmented Reality
Kira Rich Senior Product Marketing Manager AR

游览消费电子展 (CES) 这样的大型展会可能会让人晕头转向。为了优化与会者的体验,我们在 Google 展位上打造了活动规模的 360° 增强现实 (AR) 体验。我们的 Android 机器人可做您贴心的数字导游,并提供以下服务:

  • 在我们的展位内带您顺畅寻路,告诉您值得一试的演示
  • 只有通过 AR 才能实现的有趣内容,例如用我们的生成式 AI 壁纸替换拉斯维加斯会议中心的立面,或者设计巨型球状建筑 Sphere 上的交互式 Android,让在现实中未见过这一地标建筑的人一饱眼福
  • 有用的导航提示和前往交通枢纽的快速指引(单轨电车、接驳车)

我们与 Left Field LabsAdobe 合作,使用 Google 最新的 AR 技术来激发开发者、创作者和品牌的灵感,提升与会者的会议体验。以下幕后故事向您揭示我们如何使用 Geospatial Creator(由 ARCoreGoogle Maps Platform 的逼真 3D 图块提供支持)来宣传 Android 上 Google 的强大功能和实用性。

通过使用 Google 的 Geospatial Creator,我们以 Android 机器人为虚拟导游,帮助与会者在 CES 展会中导航,并就 Google 展位上的体验提供有趣且实用的沉浸式提示。

我们使用的工具

Adobe Aero 预发布版本中的 Geospatial Creator

Adobe Aero 中的 Geospatial Creator 使创作者和开发者能够轻松可视化在现实世界中放置其数字内容的预期位置,这类似于 Google 地球可视化世界的方式。借助 Geospatial Creator,我们可以在 Google Maps Platform 上使用逼真 3D 图块显示拉斯维加斯会议中心,并了解 Google 展位所在的环境。在这种情况下,逼真 3D 图块中不存在展位,因为它是会议的临时构建。但是,通过利用展位的 3D 模型及其构建位置的坐标,我们能够轻松估计和可视化 Adobe Aero 内部的展位,顺利构建展位周围的体验,包括数字内容的锚点和与会者观看体验的最佳地点。

“在 2024 年 CES 展会上,我们与 Google AR、Android 和 Adobe 团队合作创建的 Android AR 体验让与会者既快乐又兴奋。这就是 AR 的终极意义。该体验不仅展示了 Geospatial Creator 无应用 AR 的惊人潜力,还展示了它在增强活动导航和参与度方面的实际应用,而所有这些只需通过扫描二维码即可获享。”
– Left Field Labs 执行创意总监 Yann Caloghiris
在围绕拉斯维加斯会议中心 Google 展位的 3D 模型来可视化和锚定 AR 体验方面,Adobe Aero 为我们提供了一种简单的方法。

借助 Geospatial Creator,我们在设计体验方面可获得多重优势:

  • 使用 Google Maps Platform 的逼真 3D 图块快速迭代 3D 素材并生成实时预览,以及以高保真方式可视化地点,这对于在不亲自来到某地点的情况下构建基于该地点的 AR 体验至关重要。 
  • 像在 Google 地球中导航那样轻松选择拉斯维加斯会议中心并稳定预览环境,这有助于我们精确地可视化和开发与现实世界地点一致的 AR 体验。

此外,Google 街景图像生成了全景 Skybox,有助于在 Cinema 4D 中可视化故事板中的视线。我们还将 Skybox 和逼真 3D 图块从 Google Maps Platform 导入到 Unreal Engine 中,以真实世界比例可视化遮挡模型。

在 Adobe Aero 中,我们完成了所有 3D 素材的最终组装,并创建了体验中的所有交互行为。我们还使用该工具来制作更简单的导航元素的动画,例如展位中的信息面板素材。

我们主要使用 Adobe Aero 中的 Geospatial Creator 完成 AR 开发,并使用 Unreal Engine 和 Autodesk Maya 等其他工具将体验变为现实。

Adobe Aero 还支持 Google Play 免安装应用和 App Clips1,这意味着与会者无需下载应用即可体验。他们只需在展位上扫描二维码,即可直接启动体验。这非常适合用户上手,并能减少麻烦,尤其是在 CES 展会等热闹活动中。

Unreal Engine 用于引入逼真 3D 图块,使这些图块能够构建与周围环境紧密交互的 3D 动画 Android 机器人。这种方法对于预览体验至关重要,使我们能够了解视线以及在哪里放置内容最好,以便从 Google 展位获得最佳观看效果。

Autodesk Maya 用于为体验中的不同场景创建 Android 机器人角色、环境遮罩和其他 3D 道具,也用于编写最终素材。

Babylon 导出器用于从 Autodesk Maya 导出 glTF 格式的内容,以便将内容导入 Adobe Aero。

Figma 用于设计可轻松导入 Adobe Aero 的平面用户界面元素。

Cinema 4D 用于其他可视化和宣传镜头,有助于在体验的开发过程中确保效果与利益相关者的想法保持一致。

设计体验

在设计阶段,我们设想 AR 体验具有多种交互,因此与会者可以体验到将精确而强大的 AR 元素融入周围现实世界的乐趣。此外,他们可以体验到嵌入周围真实物体中的实用背景信息,这些信息既准确又适时。

08_Storyboard
为了使 AR 体验更具吸引力,我们为人们创造了与环境交互的几种方式(单击以放大)。

创意故事板

使用 Adobe Aero 为地理空间 AR 体验创建有效的故事板时,首先要清楚了解数字叠加层如何与真实世界的地点交互。

Left Field Labs 首先在 Google 展位所在的拉斯维加斯会议中心绘制关键地理点位,在此过程中整合了物理和数字元素。故事板中描绘的每个场景都展示了虚拟物体和真实世界环境如何互动,确保人们感到用户交互和移动自然而直观。

“在选择体验在环境中移动的方式时,我们能将内容固定至 Google 映射的地点,并在 Google 的 Geospatial Creator 中使用逼真的 3D 地图方块,这种自由度令人难以置信。这使我们能够灵活地创建最佳流程。”
– Left Field Labs 技术总监 Chris Wnuk

在故事板制作过程的早期,我们决定让虚拟 3D Android 机器人担任导游。用户可以在同一个有利位置 360° 转身跟随机器人“走”在场地周围。这使我们能够设计交互式体验及其中的每个元素,从用户站立的位置设计合适的视角,并让他们全面了解 Google 展位和周围的 Google 体验,如单轨列车或 Sphere。

故事板不仅描绘了 AR 元素,还考虑了用户路径、视线和环境因素,如展位周围和附近环境的 AR 内容的时间、遮挡和整体布局。

Link to Youtube Video (visible only when JS is disabled)

我们的目标是为与会者提供引人入胜、有趣实用的内容,帮助他们在 CES 展会上直观游逛 Google 展位。

用户体验和交互性

在设计 AR 时,我们了解到,用户的互动性以及确保体验有趣又实用都很关键。在整个体验中,我们增加了多种互动方式,让用户可以浏览展位内的不同演示站点,通过 Google 地图获得单轨电车和接驳车的导航指引,并直接与 Android 机器人互动。

Android 品牌团队和 Left Field Labs 创造了简单而富有表现力的 Android 角色,这既带来乐趣又带来对环境的丰富背景信息,让用户乐在其中,同时还能管理用户设备的压力。该团队采用敏捷的方法,在广泛的 Android 和 iOS 移动设备上进行迭代,以确保不同智能手机、可折叠设备等各种类型设备以及操作系统版本之间性能流畅,尽可能使更多受众可以获享 AR 体验。

10_Testing
借助 Adobe Aero 中的 Geospatial Creator,我们能够确保特定地点的 3D 内容在整个开发过程中都是准确的。

测试体验

我们持续迭代基于地点测试的交互式元素。我们进行了两个地点测试:首先,在设计阶段,测试帮助我们验证了拉斯维加斯会议中心的视觉定位服务 (VPS) 的性能;其次,在设计阶段结束和 CES 展会开幕的前几天,测试进一步验证了 3D 内容的放置,并使我们能够在现场建造 Google 展位结构后进行任何最终调整。

“再也不用担心部署真是太好了。这种对物理对象的跟踪和本地化速度是我见过最好最快的!”
– Devin Thompson,Left Field Labs 技术副总监

与会者体验

与会者来到 Google 展位时,可以看到一个带有二维码的标志,扫描二维码即可进入 AR 体验。我们将标志放置在展位上最显眼的有利位置,确保周围的人有足够的空间用他们的设备扫描并参与 AR 体验。

11_AR Entry Point
通过扫描二维码,与会者能直接进入 AR 体验,看到拉斯维加斯会议中心后面弹出的虚拟 Android 机器人,引导他们完成完整的 AR 体验。

与会者很高兴看到 Android 机器人接管拉斯维加斯会议中心。在初始化 AR 体验时,机器人在建筑物的 3D 视图中显示了一个生成式 AI 的壁纸场景,同时在建筑物立面的边缘大秀滑板技术。

借助 Geospatial Creator,我们可以“替换”拉斯维加斯会议中心的立面,让人们看到 Android 机器人在展示生成式 AI 壁纸演示时突出显示该技术的深度和遮挡能力的有趣场景。

许多人还指出,在展位周围的有趣位置中嵌入基于地点的 AR 内容和背景信息(例如通过 Google 地图导航)十分有用。交互式面板叠加在展位周围,然后可以介绍位于展位周围每个站点的关键物理演示。与会者可以快速浏览演示的不同主题和功能,围绕展位进行定位,并决定他们想首先访问的区域。

“我喜欢这个体验!地图和 AR 结合在一起很有意义。我觉得在每个展位上轻松了解该展位有什么演示以及导航链接非常有帮助。我认为除了在 CES 展会之外,人们也能使用这种功能!”
– CES 与会者
Android 机器人可帮助与会者直观地了解 Google 展位上的不同区域和演示,帮助他们决定首先要看的内容。

在我们采访的与会者中,超过一半的人参与了完整的体验。他们能够跳过与自己不太相关的部分体验,只关注更有价值的互动。总体而言,我们了解到,大多数人喜欢看到有趣实用的内容,他们很高兴能进一步探索展位的其他演示。

许多与会者参与了完整的 AR 体验,深入了解了 CES 展会的 Google 展位。
15_Shahram & Kira
Google AR/XR 副总裁兼总经理 Shahram Izadi 在 CES 展会上观看完整的地理空间 AR 体验演示。

对于希望以更多方式在活动中发现参展商并与之互动的与会者来说,基于地点的 AR 体验可以改造他们的活动体验。这一趋势凸显了消费者对更沉浸式的互动世界的期望发生了更广泛的转变,线上和线下体验之间的界限更加模糊。在 CES 展会等活动中,AR 内容可以提供更加沉浸式和个性化的体验,不仅可以用于娱乐,还能以有意义的方式连接与会者,向他们提供信息。

如需了解 Google AR、Geospatial Creator 等最新消息,请在 LinkedIn (@GoogleARVR) 和 X (@GoogleARVR) 上关注我们。此外,请访问我们的 ARCoreGeospatial Creator 网站,了解如何使用 Google 的 AR 技术开始构建。