Na busca pela próxima grande plataforma de hardware, a Meta e em breve a Apple estão experimentando com óculos de realidade virtual (VR) e realidade aumentada (AR). A inteligência artificial forma a base dessa nova classe de dispositivos.

Os óculos de VR e AR estão se beneficiando de avanços significativos na visão computacional, ou seja, na forma como um computador percebe o ambiente ao seu redor. Por exemplo, o headset Quest da Meta pode escanear o ambiente em tempo real e apontar obstáculos, para que você não tropece neles na realidade virtual.

É possível desenhar fronteiras virtuais no espaço com precisão de centímetros. E os movimentos das suas mãos são capturados em tempo real com um mínimo de sobrecarga computacional – uma tarefa que antes exigia hardware especializado caro e que consumia muita energia, agora é feita em um dispositivo móvel.

“A IA acelera tudo o que toca”

A inteligência artificial é a força motriz por trás dessa crescente fusão entre a realidade analógica e digital, também conhecida como realidade mista, que a Apple e a Meta estão buscando com seus últimos dispositivos de hardware.

“O aprendizado de máquina tem sido uma tecnologia fundamental em produtos de realidade virtual há muitos anos, e foram as inovações em visão computacional que tornaram dispositivos como o Meta Quest possíveis desde o início”, escreve o CTO da Meta, Andrew Bosworth, no anúncio do Meta Quest 3.

Para o seu mais recente headset de realidade virtual, a Meta otimizou o rastreamento visual dos controladores para eliminar a necessidade de anéis de rastreamento grandes e visíveis. Em vez disso, os controladores compactos são detectados mesmo quando quase desaparecem na mão do usuário.

“Esses são os tipos de situações em que a IA permite realizar um processamento computacional pesado que seria impossível em um dispositivo móvel sem sensores avançados ou recursos adicionais de hardware”, escreve Bosworth.

De acordo com o Meta, o maior impacto será o uso da IA generativa no metaverso, permitindo que muitas pessoas criem conteúdo para o mundo digital. Pequenas equipes teriam de repente o poder de grandes estúdios, o que aceleraria enormemente a inovação.

O chefe de IA da Meta, Yann LeCun, também descreve um assistente de IA como um companheiro diário: com acesso ao conhecimento do mundo, ele seria “sua melhor defesa contra a desinformação”.

Meta is known to be working on video datasets for AI training that show people’s everyday lives from a first-person perspective. This data could be used to train AI assistants that participate in people’s daily lives via AR headsets, as opposed to ChatGPT, which is locked inside a computer.

O grande momento da Apple em relação à IA?

É muito provável que a Apple revele seu próximo grande dispositivo de hardware na próxima segunda-feira: um headset que se assemelha mais a um headset de realidade virtual, mas usa câmeras de vídeo para transmitir o mundo exterior para sua tela embutida, onde é mesclado à realidade mista.

A indústria de RV e RA está esperando por uma grande novidade, mas o anúncio também é interessante para a cena de IA, já que a Apple tem sido bastante reservada quando se trata de IA, apesar dos enormes investimentos realizados nos últimos anos.

No entanto, para o seu headset de realidade mista, a Apple terá que depender da IA para competir, por exemplo, em visão computacional, varredura espacial e rastreamento de mãos. Modelos multimodais avançados podem ser usados para reconhecimento de objetos. A Apple já demonstrou que tem domínio da tecnologia com os serviços de AR para iPhone e iPad.

Não seria uma grande surpresa se a Apple conseguisse construir hardware melhor do que a Meta, graças a décadas de experiência. No entanto, a alavanca maior pode ser, em última instância, a qualidade da experiência do usuário e a funcionalidade que uma implementação de IA de alta qualidade oferece. É nesse ponto que a verdadeira competição pode ocorrer. A partir de segunda-feira, poderemos ver até que ponto a Apple avançou com a IA em uma comparação direta com um concorrente.