IT之家 El 6 de noviembre, la empresa fundada por “Madre de la IA” Li Feifei, World Labs, lanzó en septiembre de este año “el primer modelo mundial multimodal” — Atlas, alegando que este modelo puede generar imágenes y fotogramas de video con control de la cámara preciso hasta el nivel de píxel, y reconstruirlos en 3D.
Después de dos meses, World Labs lanzó un proyecto de demostración llamado Frameboy, que permite a los usuarios experimentar directamente en la página web, explorar un mundo multimodal en tiempo real con una versión de Atlas altamente optimizada, y transmitir medios en streaming con GPU en la nube a un máximo de 15 fotogramas por segundo.
Prueba de experiencia de IT Home, Frameboy es un proyecto de simulación similar a una consola de juego. Los usuarios pueden hacer clic en diferentes “cassettes de juego” para elegir diferentes mundos de simulación. Después de unos diez segundos de carga, se puede explorar libremente el mundo simulado.
Las teclas y el joystick de Frameboy se controlan a través de teléfono táctil, teclas de teclado; la tecla cruzada se utiliza para moverse, y el joystick para ajustar la perspectiva. La operación en general es un poco lenta, ya que hay un máximo de 15 fotogramas por segundo.
Además, Frameboy actualmente debe operar en servidores de GPU potentes en la nube, y su costo no es barato en comparación con los métodos de renderizado local.
Sin embargo, esta demostración es como un punto de partida. Si en el futuro el número de fotogramas aumenta y el costo de operación disminuye, ¿significa eso que todos podrán crear un mundo virtual y jugar directamente en la página web?
La dirección para experimentar con Frameboy en IT Home es la siguiente: