Crie para óculos de IA com a prévia para desenvolvedores 3 do SDK do Android XR e desbloqueie novos recursos para experiências imersivas

Em outubro, a Samsung lançou o Galaxy XR, o primeiro dispositivo com tecnologia Android XR. E foi incrível ver o que alguns de vocês criaram! Confira o que alguns dos nossos desenvolvedores estão dizendo sobre a jornada deles no Android XR.

O Android XR nos deu um mundo totalmente novo para criar nosso app. As equipes precisam se perguntar: qual é a maior e mais ousada versão da sua experiência que você poderia criar? Esta é sua oportunidade de finalmente colocar em prática o que você sempre quis fazer, porque agora você tem a plataforma que pode tornar isso realidade. - Kristen Coke, Calm, gerente principal de produtos

Também mostramos outros dispositivos que serão lançados e funcionam com o Android XR, como o Project Aura da XREAL e os óculos estilosos da Gentle Monster e da Warby Parker.

Para oferecer suporte à seleção cada vez maior de dispositivos XR, anunciamos a prévia para desenvolvedores 3 do SDK do Android XR.

Com a prévia para desenvolvedores 3 do SDK do Android XR, além de criar experiências imersivas para dispositivos como o Galaxy XR, agora você também pode criar experiências aumentadas para os futuros óculos de IA com Android XR. 

Novas ferramentas e bibliotecas para experiências de realidade aumentada

Com a prévia para desenvolvedores 3, estamos disponibilizando as ferramentas e bibliotecas necessárias para criar experiências aumentadas inteligentes e sem usar as mãos para os óculos de IA. Os óculos de IA são leves e portáteis para usar o dia todo. Você pode estender seu app para dispositivos móveis e aproveitar os alto-falantes, a câmera e o microfone integrados para oferecer interações novas, úteis e atenciosas aos usuários. Com a adição de uma pequena tela nos óculos de IA com tela, você pode apresentar informações aos usuários de forma privada. Os óculos de IA são perfeitos para experiências que podem ajudar a melhorar o foco e a presença de um usuário no mundo real.

Para oferecer experiências aprimoradas nos óculos de IA, estamos lançando duas novas bibliotecas criadas especificamente para o SDK Jetpack XR:

• Jetpack Projected: criado para conectar dispositivos móveis e óculos de IA com recursos que permitem acessar sensores, alto-falantes e telas nos óculos.
• Jetpack Compose Glimmer: nova linguagem de design e componentes de interface para criar e estilizar suas experiências de realidade aumentada nos óculos de IA com tela

O Jetpack Compose Glimmer é uma demonstração das práticas recomendadas de design para experiências aumentadas bonitas e com transparência óptica. Com componentes de UI otimizados para a modalidade de entrada e os requisitos de estilo dos óculos de IA, o Glimmer do Jetpack Compose foi projetado para clareza, legibilidade e distração mínima.

Para ajudar a visualizar e testar a interface Glimmer do Jetpack Compose, apresentamos o emulador de óculos de IA no Android Studio. O novo emulador de óculos com IA pode simular interações específicas dos óculos, como entrada de texto por voz e touchpad. 

Além das novas bibliotecas Jetpack Projected e Jetpack Compose Glimmer, também estamos expandindo o ARCore para Jetpack XR e oferecendo suporte aos óculos de IA. Vamos começar com o rastreamento de movimento e os recursos geoespaciais para experiências aumentadas. Esses são os recursos exatos que permitem criar experiências de navegação úteis, perfeitas para dispositivos de uso diário, como os óculos de IA.

Expansão do suporte para experiências imersivas

Continuamos investindo nas bibliotecas e ferramentas que oferecem experiências imersivas para headsets de XR, como o Samsung Galaxy XR, e óculos de XR com fio, como o Project Aura da XREAL, que será lançado em breve. Ouvimos seu feedback e adicionamos vários recursos muito solicitados ao SDK Jetpack XR desde a prévia para desenvolvedores 2.

O Jetpack SceneCore  agora tem carregamento dinâmico de modelos glTF via URIs e suporte aprimorado a materiais para criar novos materiais PBR durante a execução. Além disso, o componente SurfaceEntity foi aprimorado com suporte completo ao gerenciamento de direitos digitais (DRM) do Widevine e novas formas, permitindo renderizar vídeos de 360 e 180 graus em esferas e hemisférios.

Em Jetpack Compose para XR, você encontra novos recursos, como o componente UserSubspace para comportamento de acompanhamento, garantindo que o conteúdo permaneça na visualização do usuário, não importa para onde ele olhe. Além disso, agora é possível usar animações espaciais para transições suaves, como deslizamento ou esmaecimento. Para oferecer suporte a um ecossistema crescente de dispositivos imersivos com diversos recursos de exibição, agora é possível especificar tamanhos de layout como frações do campo de visão confortável do usuário.

No Material Design para XR, os novos componentes se adaptam automaticamente no espaço usando substituições. Isso inclui caixas de diálogo que se elevam espacialmente e barras de navegação que aparecem em um Orbiter. Além disso, há um novo componente SpaceToggleButton para facilitar a transição para e de um espaço completo.

No ARCore para Jetpack XR, foram adicionadas novas funcionalidades de percepção, incluindo captura de expressões faciais com 68 valores de blendshape que desbloqueiam um mundo de gestos faciais. Você também pode usar o acompanhamento ocular para ativar avatares virtuais e mapas de profundidade para permitir interações mais realistas com o ambiente do usuário.

Para dispositivos como o Project Aura da XREAL, estamos lançando o emulador de óculos XR no Android Studio. Essa ferramenta essencial foi projetada para oferecer uma visualização precisa do conteúdo e corresponder às especificações reais do dispositivo para campo de visão (FoV), resolução e DPI, acelerando seu desenvolvimento.

Se você cria experiências imersivas com o Unity, também estamos expandindo seus recursos de percepção no SDK do Android XR para Unity. Além de muitas correções de bugs e outras melhorias, estamos expandindo os recursos de rastreamento para incluir: códigos QR e ArUco, imagens planas e rastreamento corporal (experimental). Também estamos lançando um recurso muito solicitado: a fusão de cenas. Ele permite interações muito mais profundas com o ambiente do usuário. Agora, seu conteúdo digital pode ricochetear nas paredes e subir nos sofás.

E isso é só o começo! Confira nossa página de experiências imersivas para mais informações.

Comece hoje mesmo!

A prévia para desenvolvedores 3 do SDK do Android XR já está disponível! Faça o download da versão mais recente do Android Studio Canary (Otter 3, Canary 4 ou mais recente) e faça upgrade para a versão mais recente do emulador (36.4.3 Canary ou mais recente). Depois, acesse developer.android.com/xr para começar a usar as bibliotecas e exemplos mais recentes necessários para criar a crescente seleção de dispositivos Android XR. Estamos criando o Android XR com você! Não se esqueça de compartilhar seu feedback, sugestões e ideias com nossa equipe à medida que avança na sua jornada no Android XR.