產品新訊

使用 Android XR SDK 開發人員預覽版 3 建構 AI 眼鏡應用程式,並解鎖沉浸式體驗的新功能

4 分鐘閱讀
Matthew McCullough
Android 開發人員產品管理副總裁

Samsung 於 10 月推出 Galaxy XR,這是第一款搭載 Android XR 的裝置。我們很期待看到各位的成果!以下是部分開發人員對 Android XR 開發歷程的看法。

Android XR 為我們提供全新的應用程式建構世界。團隊應自問:您能打造的最大膽、最宏偉的體驗是什麼?現在您擁有可實現夢想的平台,終於有機會付諸行動。- Kristen Coke,Calm 首席產品經理

我們也分享了其他即將推出的 Android XR 裝置,例如 XREAL 的 Project Aura,以及 Gentle Monster 和 Warby Parker 的時尚眼鏡

為支援更多 XR 裝置,我們宣布推出 Android XR SDK 開發人員預覽版 3!

image.png

除了為 Galaxy XR 等裝置打造沉浸式體驗,您現在還能使用 Android XR SDK 開發人員預覽版 3,為即將推出的 Android XR AI 眼鏡打造擴增體驗

擴增體驗的新工具和程式庫

透過開發人員預先發布版 3,您可以取得建構 AI 眼鏡智慧免持擴增實境體驗所需的工具和程式庫。AI 眼鏡輕巧便攜,適合全天候配戴。您可以擴充現有的行動應用程式,充分運用內建喇叭、攝影機和麥克風,提供貼心實用的全新使用者互動體驗。在 Display AI Glasses 上新增小型螢幕後,您就能私下向使用者呈現資訊。AI 眼鏡非常適合用來提升使用者在現實世界中的專注力和臨場感。

image.png

為支援 AI 眼鏡的擴增體驗,我們在 Jetpack XR SDK 中推出了兩項全新專用程式庫:

Jetpack Compose Glimmer 示範了設計最佳做法,可打造精美的光學透視擴增實境體驗。Jetpack Compose Glimmer 專為清晰度、可讀性及減少干擾而設計,提供針對輸入模式和顯示 AI 眼鏡的樣式需求最佳化的 UI 元件。

image.png

為協助您查看及測試 Jetpack Compose Glimmer UI,我們在 Android Studio 中推出了 AI 眼鏡模擬器。新的 AI 眼鏡模擬器可模擬觸控板和語音輸入等眼鏡專屬互動。

AI Glasses Emulator.gif

除了新的 Jetpack Projected 和 Jetpack Compose Glimmer 程式庫,我們也擴充了 ARCore for Jetpack XR,以支援 AI 眼鏡。我們首先推出動作追蹤地理空間功能,打造擴增實境體驗,這些功能可協助您建立實用的導覽體驗,非常適合 AI 眼鏡等全天候穿戴式裝置。

navigation.webp

擴大支援沉浸式體驗

我們將持續投入心力,開發支援XR 頭戴式裝置 (例如 Samsung Galaxy XR) 和有線XR 眼鏡 (例如 XREAL 即將推出的 Project Aura) 沉浸式體驗的程式庫和工具。我們聽取了您的意見,並在開發人員預覽版 2 之後,為 Jetpack XR SDK 新增了多項熱門功能。

Jetpack SceneCore  現在支援透過 URI 動態載入 glTF 模型,並改善材質,方便在執行階段建立新的 PBR 材質。此外,SurfaceEntity 元件也強化了 Widevine 數位著作權管理 (DRM) 的完整支援功能和新形狀,可在球體和半球體中算繪 360 度和 180 度影片

Jetpack Compose for XR 中,您會發現新功能,例如用於追蹤行為的 UserSubspace 元件,可確保內容留在使用者的視野中,無論他們看向何處。此外,您現在可以使用空間動畫,製作滑動或淡出等流暢的轉場效果。此外,為了支援不斷擴大的沉浸式裝置生態系統,以及各種顯示功能,您現在可以將版面配置大小指定為使用者舒適視野的分數。

Material Design for XR 中,新元件會透過覆寫自動調整空間。包括可提升空間感的對話方塊,以及會彈出至 Orbiter 的導覽列。此外,我們還提供新的 SpaceToggleButton 元件,方便您輕鬆切換至全螢幕空間,或從全螢幕空間切換回來。


此外,ARCore for Jetpack XR 也新增了感知功能,包括臉部追蹤,可提供 68 個混合形狀值,解鎖各種臉部動作。您也可以使用眼動追蹤技術來控制虛擬化身,並使用深度地圖與使用者環境進行更逼真的互動。

針對 XREAL 的 Project Aura 等裝置,我們在 Android Studio 中推出了 XR 眼鏡模擬器。這項重要工具可準確呈現內容,並比照實際裝置的視野 (FoV)、解析度和 DPI,加快開發速度。

xrglasses-emulator-haxr-cropped.webp

如果您使用 Unity 打造沉浸式體驗,我們也會在 Android XR SDK for Unity 中擴充感知功能。除了修正大量錯誤及其他改良項目,我們也擴充了追蹤功能,包括:QR 和 ArUco 碼、平面圖像,以及身體追蹤 (實驗功能)。我們也將推出眾所期待的場景網格功能。這項技術可讓您與使用者的環境進行更深入的互動,現在數位內容可以從牆壁彈開,還能爬上沙發!

這只是冰山一角!詳情請參閱沉浸式體驗頁面。

立即踏出第一步!

Android XR SDK 開發人員預覽版 3 今天推出!下載最新 Android Studio Canary (Otter 3、Canary 4 以上版本),並升級至最新模擬器版本 (36.4.3 Canary 以上版本),然後前往 developer.android.com/xr,開始使用最新程式庫和範例,為日益豐富的 Android XR 裝置建構應用程式。我們與您攜手打造 Android XR!在 Android XR 學習之旅中,別忘了與我們的團隊分享意見回饋、建議和想法

撰寫者:

繼續閱讀