En el post de hoy os contamos la situación en la que se encuentra Meta frente a las nueva generación de gafas de realidad mixta, las Quest 3.
El diseñador de experiencia de usuario (UX), Andrew Fox, volvió a publicar un video en X del usuario de Facebook Netsvietaiev Oleksandr intentando usar Quest 3 en modo de paso en un avión, pero no pudo hacerlo porque la interfaz se desviaba.
El director de tecnología (CTO) de Meta, Andrew Bosworth, respondió al post resumiendo por qué estaba sucediendo y concluyó diciendo que Meta está «trabajando en ello». Entonces, ¿por qué realmente ocurre este desplazamiento en vehículos en movimiento?
La gente suele pensar que los sistemas de seguimiento interior hacia afuera sin marcadores en auriculares, gafas y controladores de autoseguimiento solo utilizan las cámaras, pero esto no es así. Estos sistemas también dependen en gran medida de la unidad de medida inercial (IMU), un chip que contiene un acelerómetro y giroscopio pequeños.
Mientras que las cámaras suelen funcionar a 30Hz o 60Hz, la IMU suele proporcionar actualizaciones alrededor de 1000Hz, lo que permite una latencia mucho menor. Sin embargo, una IMU no puede detectar el movimiento absoluto, al menos no directamente. El acelerómetro en la IMU detecta la aceleración en relación con la gravedad, y puedes integrar la aceleración a lo largo del tiempo para obtener la velocidad. Y si luego integras esos valores de velocidad a lo largo del tiempo, obtienes el desplazamiento desde la posición original.
Este proceso se llama navegación inercial. De momento a momento, es así como cada auricular y controlador se rastrea a sí mismo, y el componente óptico como cámaras o estaciones base láser solo se utiliza para corregir el error acumulativo causado por la falta de precisión de los datos de la IMU. Pero en un vehículo en movimiento, como un avión, el acelerómetro recogerá la aceleración del propio vehículo, pensando que es la aceleración del auricular, lo que resulta en el desplazamiento posicional repentino y rápido que se ve en el video de Fox arriba.
No está claro qué significa exactamente Bosworth al decir que Meta está «trabajando en» el problema.
Actualmente, es posible desactivar el seguimiento posicional de 6 grados de libertad (6DoF) en Quest 3, y el auricular volverá al seguimiento de rotación de 3 grados de libertad (3DoF) solamente, pero eso también desactiva el modo de paso. Entonces, Meta podría estar planeando permitir el modo de paso cuando se desactiva el seguimiento posicional.
Alternativamente, Meta podría estar trabajando para hacer que el seguimiento posicional funcione en vehículos en movimiento, tal vez instruyendo al sistema para depender completamente de las imágenes de la cámara y ignorar la IMU. El año pasado, Meta demostró un proyecto de investigación haciendo que un Quest Pro funcionara en un BMW en movimiento, pero esto implicaba la interfaz con la IMU incorporada en el automóvil.
Mientras tanto, Apple Vision Pro tiene un «Modo de Viaje» para su uso en aviones, y Apple ha comercializado este caso de uso, pero actualmente se desconoce qué hace exactamente el Modo de Viaje de Apple. Apple solo ha dicho que «estabilizará las imágenes». Planeo probar esta función en mi viaje de regreso después de recoger Vision Pro en Nueva York.
Te invitamos a visitar otro de nuestros posts sobre 3 herramientas útiles y gratuitasd e IA
Fuente: UPLOAD