O Kit de ferramentas de acesso ao dispositivo Wearables da Meta, que vem no final deste ano, permitirá que os aplicativos para smartphone interajam com os óculos inteligentes da empresa.
Com o lançamento inicial do SDK, a Meta diz que os desenvolvedores móveis poderão acessar a câmera, os alto -falantes e a matriz de microfones de sua linha completa de óculos. Os usuários terão que dar a cada aplicativo permissão para acessar seus óculos.
Os desenvolvedores poderiam, por exemplo, aproveitar o SDK para adicionar recursos de transmissão ao vivo ou gravação em primeira pessoa a seus aplicativos. Ou eles poderiam alimentar as imagens da câmera a um modelo de IA multimodal de terceiros para analisar o que você está vendo.
No lançamento, o META WEARLABLABLE Disposited Access Toolkit não suporta meta ai. Isso não quer dizer que os desenvolvedores não sejam capazes de construir experiências de IA. Mas eles terão que iniciar um fluxo de áudio contínuo de e para os óculos e enviar imagens da câmera para seu próprio modelo de AI, a seu próprio custo, e isso afetará a duração da bateria. Meta diz que adicionar a integração do Meta AI é uma “área -chave” que está explorando para futuras atualizações no kit de ferramentas.
O SDK também não apoiará o envio de imagens para o META RAY-BAN DISPLAY HUD, nem acessando gestos de sua banda meta neural, mas a Meta diz que está começando a pensar em como isso pode eventualmente funcionar.
Os desenvolvedores interessados podem se inscrever na visualização do meta wearables wearables de acesso ao kit de ferramentas preenchendo este formulário.
Experiências iniciais de desenvolvedor
A Meta forneceu uma versão inicial do Wearables Disposited Access Toolkit para um punhado de desenvolvedores há vários meses, incluindo Twitch, Microsoft, Logitech Streamlabs e Disney.
O Twitch e a Logitech Streamlabs estão usando o SDK para permitir que você veja sua visualização em primeira pessoa em suas plataformas, assim como você já pode no Instagram, enquanto a Microsoft a está usando para ver a plataforma de IA que ajuda as pessoas cegas a navegar e interagir com o mundo ao seu redor.
Como o 18Birdies está usando o kit de ferramentas.
Um caso de uso particularmente interessante vem de 18Birdies. O aplicativo de golfe está experimentando o uso de kit de ferramentas de acesso ao dispositivo Meta Wearables para jardas em tempo real e recomendações de clubes, ajudando os golfistas sem exigir que eles tirem o telefone do bolso.
Outro é da equipe de imaginação da Disney, que é explorando Usando o kit de ferramentas para dar aos hóspedes um guia pessoal de IA em parques da Disney.
A Disney explora usando os óculos Ray-Ban Meta para orientar os hóspedes ao redor de seus parques
A Disney está explorando usando os óculos Ray-Ban Meta oferece aos hóspedes um guia pessoal de IA em seus parques, alavancando o novo Kit de ferramentas de acesso ao dispositivo Meta Wearables.












Leave a Reply