Cómo funciona la tecnología de seguimiento de manos de Oculus Quest

El Oculus Quest (tanto el modelo original como el segundo(second model) ) tiene una historia interesante de características que se agregan mucho después de que el hardware esté disponible. El más famoso de estos es Oculus Link , que efectivamente convierte al Quest en un Oculus Rift . Esta función tuvo tanto éxito que Oculus decidió descontinuar todos sus auriculares excepto el Quest

(Hand)El seguimiento de manos no ha causado tanto revuelo como Oculus Link , pero sigue siendo una característica increíble con mucho potencial. Con el seguimiento manual no necesita controladores en absoluto. ¡Tus propias manos están digitalizadas en el mundo de la realidad virtual! 

Si tiene un Quest o está pensando en comprar uno, vale la pena saber cómo funciona el seguimiento manual y qué puede aportar a la experiencia de realidad virtual.

Cómo sigue Quest el mundo

Oculus Quest utiliza un enfoque innovador para el seguimiento de movimiento que comúnmente se conoce como seguimiento "de adentro hacia afuera", que es muy diferente de cómo funcionaba el seguimiento de movimiento en el pasado. 

Cuando se lanzaron los primeros auriculares de próxima generación a mediados de la década de 2010, utilizaron una o más cámaras de seguimiento externas. Las luces especiales de seguimiento de movimiento en los auriculares le dijeron a la cámara exactamente dónde estaba el auricular en relación con él. Con algunas matemáticas inteligentes, esos datos podrían convertirse en un seguimiento de movimiento muy preciso en el espacio 3D. Así es como los cascos VR premium ofrecen "seis grados de libertad", también conocidos como 6DoF. 

Quest mueve el sensor de la cámara al auricular mismo, en este caso colocándolos en puntos estratégicos del dispositivo. Otros auriculares pueden usar incluso más cámaras para mejorar la precisión. Estas cuatro cámaras permiten que Quest mire el mundo real que te rodea y determine cuál es tu posición dentro de ese espacio. 

Eso es lo que permite que Quest sea autónomo y portátil. También es la característica que permite que el seguimiento manual con Oculus sea posible en primer lugar.

Los controladores táctiles estándar de Oculus(Standard Oculus Touch Controllers)

Para comprender qué hace que el seguimiento manual de Oculus sea tan impresionante, debemos comenzar con los controladores físicos bastante mundanos que vienen con Oculus Quest . Cada uno tiene un seguimiento completo del movimiento mediante sensores internos y marcadores especiales de seguimiento de movimiento que le indican a las cámaras a bordo del Quest dónde están los controladores en relación con los auriculares.

Cuando sostiene los controladores táctiles en VR, se rastrean con una precisión asombrosa. Usando los botones de agarre y activación en el controlador, el software VR puede crear una experiencia convincente de agarrar y manipular elementos. Esto se usa con gran eficacia en juegos como Half-Life Alyx y The Climb , donde los elementos de agarre en el mundo de la realidad virtual son una parte central del juego. 

Los controladores táctiles(Touch Controllers) también ofrecen retroalimentación háptica gracias a dispositivos llamados "actuadores lineales", que pueden crear sensaciones físicas de chocar contra cosas, vibraciones y otras sensaciones táctiles. Los botones y botones también ofrecen una forma familiar de moverse por un espacio de realidad virtual cuando no puede moverse físicamente en su espacio real.

La principal desventaja de esto en comparación con el seguimiento manual es que tiene ganchos para las manos. Puede realizar simples movimientos de pellizco con sus manos virtuales, pero eso es todo. No se siente como una gran limitación cuando los juegos están diseñados alrededor de los controladores, pero el seguimiento manual abre un espectro de nuevas posibilidades en la realidad virtual.

Qué hace el seguimiento manual de Oculus

Cuando el seguimiento de manos está habilitado, verá una representación precisa de sus manos reales dentro del mundo de realidad virtual. Cada movimiento de tus dedos o muñeca se reflejará en sus dobles virtuales.

Hand Tracking ya no es una función beta de Quest . Ahora está integrado en el sistema operativo y en muchas aplicaciones propias de Quest . El primer gran beneficio aquí es que si solo desea ponerse rápidamente su Quest y ver una película en realidad virtual o navegar por la tienda de aplicaciones, no tiene que hacer el esfuerzo de atar los controladores táctiles. Usando solo sus manos, puede acceder a los menús del sistema y navegar con facilidad.

Ahora que el seguimiento manual es una característica oficial de Quest , los desarrolladores de aplicaciones de terceros pueden agregarlo a sus aplicaciones. Ya hay una serie de aplicaciones que hacen un excelente uso de la función de seguimiento de manos de Oculus , pero estamos seguros de que los desarrolladores encontrarán muchas formas más emocionantes en las que el seguimiento directo de manos puede transformar la experiencia de realidad virtual.

Cómo funciona el seguimiento manual de Oculus

Los resultados del seguimiento manual son bastante sorprendentes, pero ¿cómo funciona realmente? Obviamente , Oculus no va a publicar los detalles exactos de su solución patentada, pero conocemos las tecnologías y los principios involucrados.

En primer lugar, las cámaras a bordo son esenciales para que el seguimiento manual funcione. No solo proporcionan información de profundidad estereoscópica, sino también datos visuales para su procesamiento por visión artificial. ¿Qué es la visión artificial? Es una rama de la inteligencia artificial(artificial intelligence) , específicamente un campo conocido como aprendizaje automático. Es la misma tecnología que permite que la aplicación de la cámara de tu teléfono identifique rápidamente las caras en una foto.

Esencialmente, el software tiene que aprender qué en los datos de imagen proporcionados por la cámara es una mano y qué no es una mano. Esto probablemente se hizo al mostrarle al software miles y miles de manos en diferentes entornos hasta que pudo descubrir de manera confiable una forma rápida y efectiva de diferenciarlas de todo lo demás en su habitación.

Una vez que el software puede crear modelos virtuales precisos y en tiempo real de sus manos, los desarrolladores de aplicaciones pueden usarlos para cualquier cosa que se les ocurra. ¡Ahora puedes manipular objetos con precisión en VR!

Experiencias rastreadas a mano que vale la pena probar

Si posee un Oculus Quest , puede probar la función de seguimiento manual de Oculus sin tener que comprar ninguna aplicación en particular. Como se mencionó anteriormente, funciona en el entorno principal de Quest , así como en algunas aplicaciones propias. Cuando se trata de experiencias de terceros, hay algunas que vale la pena destacar.

The Line es una experiencia narrativa de $ 4.99 que también sirve como una demostración técnica perfecta para el seguimiento manual. Cuenta la historia de una ciudad modelo a escala que funciona con un mecanismo de relojería y pistas. 

Nuestro héroe Pedro está enamorado de Rosa , pero no puede escapar de su destino. Hasta que algo nuevo sucede un día. Interactúas con su mundo de modelos a escala usando tu mano para girar perillas, tirar de palancas y jugar con todo lo que puedas. Es una experiencia corta y lineal, pero puede mostrar el seguimiento manual de una manera muy entretenida en unos 15 minutos.

Waltz of the Wizard ($9.99) es otra excelente muestra de la tecnología. Puedes usar tus manos para lanzar hechizos e interactuar con casi todo lo que te rodea en el mundo de realidad virtual. Si alguna vez has querido vivir la fantasía de ser un mago que puede disparar rayos de luz de sus manos, ¡este es el juego para ti!

¿Qué opinas del seguimiento manual en Quest ? ¿Lo has probado? ¿Qué juegos recomendarías? Comparte(Share) tus ideas en los comentarios.



About the author

Soy ingeniero de software con experiencia tanto en Chrome como en aplicaciones de juegos. He estado trabajando en soluciones para el navegador Google Chrome durante los últimos 4 años y también he trabajado en juegos para varias plataformas diferentes. Mis habilidades radican en el diseño, prueba y gestión de proyectos de software. Además de mi trabajo como ingeniero de software, también tengo experiencia en temas de privacidad, cuentas de usuario y seguridad familiar.



Related posts