Compañero de IA en realidad mixta
Una app nativa de realidad mixta en Unity para Meta Quest que ubica a un personaje impulsado por IA en la habitación real del usuario mediante passthrough.
Rol
Desarrollador
Estado
Entregado
Resumen
El objetivo era un compañero de IA que compartiera el espacio físico del usuario en lugar de vivir en una pantalla. Desarrollé y entregué una aplicación nativa de realidad mixta en Unity para Meta Quest que lo hace posible.
Desafío
Un primer intento con WebXR chocó con los límites de acceso a la cámara del navegador. Además, el personaje tenía que respetar paredes y muebles reales, reaccionar a la interacción física y hablar en tiempo real.
Solución
Un desarrollo nativo en Unity con calibración de los límites de la habitación y anclaje espacial, corrección de suelo y escala para evitar colisiones con el entorno real, interacciones con los controles con efectos de partículas y un backend externo de LLM y TTS que maneja voz, texto y expresiones faciales.
Resultado
La aplicación fue entregada al cliente. No hay una versión pública disponible.