Android XR SDK 개발자 프리뷰 3으로 AI 안경을 빌드하고 몰입형 환경을 위한 새로운 기능 잠금 해제

10월에 삼성은 Android XR로 구동되는 최초의 기기인 갤럭시 XR을 출시했습니다. 또한 일부 개발자분들이 빌드한 결과물을 보니 정말 놀라웠습니다. 다음은 Android XR 여정에 대한 일부 개발자의 의견입니다.

Android XR은 앱을 빌드할 수 있는 완전히 새로운 세계를 제공했습니다. 팀은 다음과 같은 질문을 던져야 합니다. 만들 수 있는 가장 크고 대담한 버전의 경험은 무엇인가요? 이제는 원하는 것을 현실로 만들 수 있는 플랫폼이 있으므로 항상 하고 싶었던 일을 드디어 실행할 수 있습니다. - 크리스틴 코크, Calm, 리드 제품 관리자

또한 XREAL의 Project Aura, 젠틀몬스터와 Warby Parker의 세련된 글라스 등 Android XR과 호환되는 다른 출시 예정 기기도 미리 선보였습니다.

확장되는 XR 기기 선택을 지원하기 위해 Android XR SDK 개발자 프리뷰 3를 발표합니다.

Android XR SDK 개발자 프리뷰 3를 사용하면 Galaxy XR과 같은 기기를 위한 몰입형 환경을 빌드할 수 있을 뿐만 아니라 Android XR을 사용하는 차세대 AI 안경을 위한 증강 환경도 빌드할 수 있습니다. 

증강 환경을 위한 새로운 도구 및 라이브러리

개발자 미리보기 3에서는 AI 글래스를 위한 지능형 핸즈프리 증강 환경을 빌드하는 데 필요한 도구와 라이브러리를 제공합니다. AI 안경은 하루 종일 착용할 수 있도록 가볍고 휴대하기 편리합니다. 기존 모바일 앱을 확장하여 내장 스피커, 카메라, 마이크를 활용해 새롭고 사려 깊으며 유용한 사용자 상호작용을 제공할 수 있습니다. 디스플레이 AI 글래스에 작은 디스플레이가 추가되어 사용자에게 비공개로 정보를 표시할 수 있습니다. AI 글라스는 사용자의 집중력과 현실 세계에서의 존재감을 높이는 데 도움이 되는 경험에 적합합니다.

AI 글래스에서 증강 환경을 지원하기 위해 Jetpack XR SDK에 두 가지 새로운 맞춤형 라이브러리가 도입됩니다.

• Jetpack Projected: 안경에서 센서, 스피커, 디스플레이에 액세스할 수 있는 기능을 통해 휴대기기와 AI 안경을 연결하도록 빌드되었습니다.
• Jetpack Compose Glimmer - 디스플레이 AI 안경에서 증강 환경을 제작하고 스타일을 지정하기 위한 새로운 디자인 언어 및 UI 구성요소

Jetpack Compose Glimmer는 아름다운 광학 투과 증강 환경을 위한 디자인 권장사항을 보여주는 데모입니다. 디스플레이 AI 글래스의 입력 모달리티 및 스타일 지정 요구사항에 최적화된 UI 구성요소를 통해 Jetpack Compose Glimmer는 명확성, 가독성, 최소한의 방해 요소를 위해 설계되었습니다.

Jetpack Compose Glimmer UI를 시각화하고 테스트할 수 있도록 Android 스튜디오에 AI 안경 에뮬레이터를 도입합니다. 새로운 AI 글라스 에뮬레이터는 터치패드, 음성 입력과 같은 글라스 전용 상호작용을 시뮬레이션할 수 있습니다. 

새로운 Jetpack Projected 및 Jetpack Compose Glimmer 라이브러리 외에도 Jetpack XR용 ARCore를 확장하여 AI 글래스를 지원합니다. 증강 환경을 위해 모션 추적과 지리 공간 기능부터 시작합니다. AI 글라스와 같은 하루 종일 착용하는 기기에 적합한 유용한 탐색 환경을 만들 수 있는 정확한 기능입니다.

몰입형 환경 지원 확대

Google은 삼성 갤럭시 XR과 같은 XR 헤드셋과 XREAL의 곧 출시될 Project Aura와 같은 유선 XR 글라스의 몰입형 환경을 지원하는 라이브러리와 도구에 지속적으로 투자하고 있습니다. Google은 개발자 프리뷰 2 이후 사용자 의견을 수렴하여 Jetpack XR SDK에 요청이 많은 기능을 여러 개 추가했습니다.

Jetpack SceneCore 에는 이제 런타임에 새로운 PBR 소재를 생성하기 위한 URI를 통한 동적 glTF 모델 로딩 및 개선된 소재 지원이 포함됩니다. 또한 SurfaceEntity 구성요소가 전체 Widevine 디지털 권한 관리 (DRM) 지원 및 새로운 도형으로 구와 반구에서 360도 및 180도 동영상을 렌더링할 수 있도록 개선되었습니다.

Jetpack Compose for XR에는 따라가기 동작을 위한 UserSubspace 구성요소와 같은 새로운 기능이 있어 사용자가 어디를 보든 콘텐츠가 사용자의 시야에 유지됩니다. 또한 이제 공간 애니메이션을 사용하여 슬라이딩이나 페이드와 같은 원활한 전환을 구현할 수 있습니다. 다양한 디스플레이 기능을 갖춘 몰입형 기기의 확장되는 생태계를 지원하기 위해 이제 사용자가 편안하게 볼 수 있는 시야의 분수로 레이아웃 크기를 지정할 수 있습니다.

XR용 Material Design에서 새 구성요소는 재정의를 통해 공간에 자동으로 적응합니다. 여기에는 공간적으로 상승하는 대화상자와 Orbiter로 튀어나오는 탐색 메뉴가 포함됩니다. 또한 전체 스페이스로 쉽게 전환하거나 전체 스페이스에서 쉽게 전환할 수 있는 새로운 SpaceToggleButton 구성요소가 있습니다.

Jetpack XR용 ARCore에는 68개의 블렌드셰이프 값으로 얼굴 동작의 세계를 열어주는 얼굴 추적을 비롯한 새로운 인식 기능이 추가되었습니다. 눈 추적을 사용하여 가상 아바타를 구동하고 깊이 맵을 사용하여 사용자의 환경과 더 현실적인 상호작용을 지원할 수도 있습니다.

XREAL의 Project Aura와 같은 기기의 경우 Android 스튜디오에 XR 안경 에뮬레이터가 도입됩니다. 이 필수 도구는 개발을 가속화하기 위해 시야 (FoV), 해상도, DPI에 대한 실제 기기 사양을 일치시키면서 정확한 콘텐츠 시각화를 제공하도록 설계되었습니다.

Unity로 몰입형 환경을 빌드하는 경우 Unity용 Android XR SDK에서 인식 기능도 확장됩니다. 많은 버그 수정과 기타 개선사항 외에도 QR 및 ArUco 코드, 평면 이미지, 신체 추적 (실험적)을 포함하도록 추적 기능이 확장됩니다. 또한 많은 요청이 있었던 장면 메싱 기능도 도입됩니다. 이를 통해 사용자의 환경과 훨씬 더 깊은 상호작용을 할 수 있습니다. 이제 디지털 콘텐츠가 벽에서 튕겨 나가고 소파를 기어 올라갈 수 있습니다.

지금까지 소개한 내용은 빙산의 일각에 불과합니다. 자세한 내용은 몰입형 환경 페이지를 참고하세요.

지금 시작해 보세요!

Android XR SDK 개발자 프리뷰 3이 출시되었습니다. 최신 Android 스튜디오 Canary (Otter 3, Canary 4 이상)를 다운로드하고 최신 에뮬레이터 버전 (36.4.3 Canary 이상)으로 업그레이드한 후 developer.android.com/xr을 방문하여 증가하는 Android XR 기기 선택에 맞게 빌드하는 데 필요한 최신 라이브러리 및 샘플을 시작하세요. Google은 여러분과 함께 Android XR을 개발하고 있습니다. Android XR 여정을 진행하면서 의견, 제안, 아이디어를 Google팀과 공유해 주세요.