En la búsqueda de la próxima gran plataforma de hardware, Meta y próximamente Apple están experimentando con gafas de realidad virtual (VR) y realidad aumentada (AR). La inteligencia artificial forma la base de esta nueva clase de dispositivos.

Las gafas de VR y AR se están beneficiando de avances significativos en visión computacional, es decir, en cómo una computadora percibe el entorno que la rodea. Por ejemplo, el visor Quest de Meta puede escanear el entorno en tiempo real y señalar obstáculos para que no tropieces con ellos en la realidad virtual.

Es posible dibujar límites virtuales en el espacio con una precisión de centímetros. Y los movimientos de tus manos se capturan en tiempo real con una carga computacional mínima, una tarea que antes requería hardware especializado costoso y consumía mucha energía, ahora se realiza en un dispositivo móvil.

«La IA acelera todo lo que toca»

La inteligencia artificial es la fuerza impulsora detrás de esta creciente fusión entre la realidad analógica y digital, también conocida como realidad mixta, que Apple y Meta están buscando con sus últimos dispositivos de hardware.

«El aprendizaje automático ha sido una tecnología fundamental en los productos de realidad virtual durante muchos años, y fueron las innovaciones en visión computacional las que hicieron posible dispositivos como Meta Quest desde el principio», escribe el CTO de Meta, Andrew Bosworth, en el anuncio de Meta Quest 3.

Para su último visor de realidad virtual, Meta ha optimizado el seguimiento visual de los controladores para eliminar la necesidad de anillos de seguimiento grandes y visibles. En cambio, los controladores compactos son detectados incluso cuando casi desaparecen en la mano del usuario.

«Estos son los tipos de situaciones en las que la IA permite realizar un procesamiento computacional pesado que sería imposible en un dispositivo móvil sin sensores avanzados o características adicionales de hardware», escribe Bosworth.

Según Meta, el mayor impacto será el uso de la IA generativa en el metaverso, lo que permitirá a muchas personas crear contenido para el mundo digital. Pequeños equipos de repente tendrían el poder de grandes estudios, lo que aceleraría enormemente la innovación.

El jefe de IA de Meta, Yann LeCun, también describe a un asistente de IA como un compañero diario: con acceso al conocimiento del mundo, sería «tu mejor defensa contra la desinformación».

Se sabe que Meta está trabajando en conjuntos de datos de video para el entrenamiento de IA que muestran la vida cotidiana de las personas desde una perspectiva en primera persona. Estos datos podrían utilizarse para entrenar asistentes de IA que participen en la vida diaria de las personas a través de auriculares de realidad aumentada, a diferencia de ChatGPT, que está confinado dentro de una computadora.

¿El gran momento de Apple en relación con la IA?

Es muy probable que Apple revele su próximo gran dispositivo de hardware el próximo lunes: un auricular que se asemeja más a un auricular de realidad virtual, pero utiliza cámaras de video para transmitir el mundo exterior a su pantalla incorporada, donde se fusiona con la realidad mixta.

La industria de RV y RA está esperando con ansias esta gran novedad, pero el anuncio también es interesante para el ámbito de la IA, ya que Apple ha sido bastante reservada en cuanto a IA, a pesar de las enormes inversiones realizadas en los últimos años.

Sin embargo, para su auricular de realidad mixta, Apple tendrá que depender de la IA para competir, por ejemplo, en visión computacional, escaneo espacial y seguimiento de manos. Se pueden utilizar modelos multimodales avanzados para el reconocimiento de objetos. Apple ya ha demostrado tener dominio de la tecnología con los servicios de RA para iPhone y iPad.

No sería una gran sorpresa si Apple lograra construir un hardware mejor que Meta, gracias a décadas de experiencia. Sin embargo, la palanca más importante puede ser, en última instancia, la calidad de la experiencia del usuario y la funcionalidad que una implementación de IA de alta calidad ofrece. Es en este punto donde la verdadera competencia puede tener lugar. A partir del lunes, podremos ver hasta qué punto Apple ha avanzado con la IA en una comparación directa con un competidor.