Las cámaras de 360 ​​grados tienen un nuevo superpoder

Imagínese Google Street View, sólo usted puede caminar como si estuviera jugando un videojuego. Ahora imagina que no tienes que esperar a que Google te traiga una película porque es completamente casera. Insta360, un fabricante líder de cámaras de 360 ​​grados, se ha asociado con una startup británica de 12 personas llamada esplastica para ayudar a los creadores de contenido a hacer precisamente eso.

En enero pasado, escribimos sobre el splatting gaussiano, una tecnología que algún día permitirá a cualquiera recrear digitalmente porciones del mundo real en 3D fotorrealista. Pero Splatica hace que sea muy fácil utilizar chispas. Hoy – con solo una cámara de 360 ​​grados lista para usar y un servicio de suscripción que se encarga de todo lo demás.

Cuando digo “muy fácil”, lo digo en serio: esto es lo que tenía que hacer:

Lo probé con las cámaras Insta360 X5 y Antigravity A1 y puedes ver los resultados a continuación. Si bien no es perfecto (las tomas de presentación a menudo se ven suaves, como si hubieras entrado en una pintura generada por computadora), estoy seguro de que algunos creadores de contenido y empresarios comprarán una cámara de 360 ​​grados solo para este propósito. El cofundador de Insta360, Max Richter, me dijo que las cámaras de la compañía ya tienen una gran demanda para recorridos virtuales de bienes raíces, informes de progreso de construcción e inspecciones de instalaciones; si fuera un agente de bienes raíces, compraría una para estas funciones ahora mismo.

Aquí está mi botín del A1 Antigravity estructura de juego gigante en mi parque local (usa las teclas WASD del teclado para volar y el ratón para apuntar, o arrastra los controles en la pantalla del móvil):

y eso aro de baloncesto desgastado en otro parque calle abajo. Splatica eliminó automáticamente a la mayoría de las personas en la escena, por lo que el parque estaba un poco más vacío de lo que realmente estaba.

Si tocas el botón de ruta en la esquina superior derecha, debajo de “SD” y “HD”, verás la ruta sinuosa exacta que tomé con cada cámara (y el palo selfie Insta360 X5) para crear estos resultados.

cuando soy simple rodea el círculo una vezComo puede ver a continuación, no se ve tan bien. Splatica solo puede recrear lo que ve tu cámara, por lo que necesitas filmar desde todos los lugares posibles donde quieras “estar” en el mundo virtual.

A continuación intento simular la comprobación de la base de un puente en el mismo parque, centrarse en un pilar debajo de un tren de cercanías BART. No estoy seguro de que los detalles sean suficientes para satisfacer a los topógrafos o a los inspectores de seguridad reales; tal vez eso se deba a que el dron demasiado entusiasta que evitaba obstáculos seguía interrumpiendo mi vuelo.

Pero cuando pasé más de cinco minutos fotografiando mi patio trasero con el X5, los resultados fueron tan grandes que mi esposa y yo no nos sentimos cómodos compartiendo todo el escaneo. En su lugar, vea cómo Splatica recrea todos los objetos en mi patio trasero generando una nube de puntos 3D:

Todos estos escaneos se pueden descargar en formatos PLY y USDZ y están vinculados a mediciones del mundo real: el cofundador de Splatica, Andrey Shelomentev, me dijo que normalmente hay un error del uno por ciento cada 100 centímetros, “lo suficientemente bueno para estudios y exploración espaciales difíciles”, y dijo que las mediciones pueden ser más precisas colocando múltiples marcadores alrededor de un área.

En realidad, esta no es la primera vez que intento escanear en 3D mi patio trasero: en 2021, lo hice con un dron autónomo Skydio. Pero en ese momento, Skydio cobraba 2.999 dólares al año por la función, sin incluir drones ni servicios para unir fotografías, mientras que Splatica afirmaba que su servicio lo hacía todo de forma independiente con vídeo normal de 360 ​​grados.

La escena de ejemplo de Splatica es incluso más interesante que la mía, especialmente ahora que Splatica está tratando de demostrar que las empresas pueden usar sus servicios para entrenar robots antes de implementarlos de verdad en fábricas de todo el mundo. aqui esta el Fábrica de Electrónica Imecar en Antalya, Turquía:

Y para algo completamente diferente, aquí está. parte de la casa Leighton en Londres:

¿Cómo es posible esto simplemente caminando con una cámara? Shelomentev me dijo que su empresa fabrica una versión propietaria de SLAM (Técnicas simultáneas de localización y mapeo. que permite a todo tipo de robots, coches autónomos y dispositivos de realidad virtual conocer su posición en el espacio 3D) diseñado específicamente para crear nubes de puntos precisas a partir de vídeos de 360 ​​grados. Puedes pensar en las nubes de puntos como los “huesos” de un objeto 3D que luego se pintan con color.

Y aunque Splatica dice que puede funcionar con cualquier cámara de 360 ​​grados, ayuda que las cámaras Insta360 y Antigravity incluyan todo tipo de metadatos adicionales en los archivos de video. “Los archivos contenían todo lo que necesitábamos: parámetros de distorsión de la lente, velocidad de obturación, datos del acelerómetro y giroscopio, y GPS, transmitidos desde la aplicación móvil Insta360 directamente a la cámara durante la captura”, dijo el CEO y cofundador de Splatica, Eugene Nikolskii. Borde.

_{Arriba: Corridor Crew explica visualmente cómo funciona la aspersión.}

El combo Insta360/Splatica tiene sus limitaciones. Si amplía cualquiera de mis ejemplos incrustados o vinculados para ver detalles finos, probablemente verá manchas de color ligeramente translúcidas en lugar de una textura legible; así es como se crean las salpicaduras. La fotogrametría tradicional de alta resolución puede funcionar mejor si lo que más le importa son las superficies.

Pero eso no ha impedido que Insta360, Antigravity y Splatica lancen campañas de marketing. llamado el Proyecto Eternoque la empresa promociona como una “iniciativa global” para preservar los monumentos culturales para las generaciones futuras. Ofrece premios para los mejores símbolos gaussianos, 1000 cargas gratuitas de Splatica (por orden de llegada) y un proyecto piloto para escanear Pompeya y sus impresionantes vistas. Civita di Bagnoregio en Italia. También “invitaron a creadores de contenido de todo el mundo” a escanear sitios como los teatros romanos y la isla de Jeju en Corea.

(Las empresas no nos dijeron cuánto invirtieron en Project Eternal y admitieron que no ayudan a los creadores a obtener permiso para esas ubicaciones, pero Splatica afirma que mantendrán el acceso público indefinido a cada escena enviada al “Open Heritage Dataset”, y la empresa obtuvo el permiso. política de privacidad decente lo que deja claro que tu contenido es tuyo).

Además, Richter de Insta360 dijo que su compañía ya tiene clientes empresariales que prueban la reconstrucción 3D y los flujos de trabajo de gemelos digitales en la construcción y la gestión de instalaciones, y espera proporcionar datos más completos desde cámaras hasta servicios de reconstrucción 3D y hacer que el proceso sea más fluido.

Actualmente, la mayor barrera de entrada a Splatica puede ser que sus servicios no sean baratos. La empresa cobra entre 18 y 25 céntimos por segundo por el vídeo procesado, y también hay que pagar una suscripción mensual. Actualmente, la compañía está experimentando con los precios: la semana pasada eran $70, $200 o $385 por mes dependiendo del tamaño del escaneo que necesite, mientras que esta semana los mismos niveles eran $50, $150 y $300.

Pero si quieres probarlo, es posible que aún puedas obtener una de las 1000 máquinas tragamonedas gratuitas. Splatica dijo que renunciará a las tarifas de suscripción para los primeros 1.000 usuarios, cada uno de los cuales puede convertir 10 minutos de metraje de 360 ​​grados en un mini mundo 3D. También puedes explorar más de 100 salpicaduras adicionales. Galería pública Splatica.