HN revela: experiencia inmersiva con Gaussian Splat en la Sutro Tower de San Francisco
(vincentwoo.com)- Se puede explorar en 3D desde la web Sutro Tower, una estructura icónica de San Francisco, y en teléfonos se puede ver la escena como si uno caminara dentro de ella usando el modo AR
- Para crear la escena se usó Gaussian Splatting, con un pipeline que va desde la captura con dron, la alineación en RealityCapture, el entrenamiento con gsplat, la compresión SOGS y el renderizado en PlayCanvas
- Admite controles con mouse, touch y teclado, lo que permite moverse libremente alrededor de la torre con Orbit, Pan, Look, Zoom, Fly, ajuste de velocidad y reinicio de cámara
- En la pata oeste hay un elevador interno; caben dos personas con cierta incomodidad y el recorrido completo tarda 8 minutos
- Sutro Tower, de 977 pies de altura, es más baja que Salesforce Tower, pero como sus cimientos están a 834 pies sobre el nivel del mar, ofrece una sensación de mayor altura en las vistas de San Francisco
Escena 3D de Sutro Tower en la web
- El modelo 3D de Sutro Tower en San Francisco se puede explorar libremente desde el navegador
- En teléfonos, se puede activar el modo AR con el pequeño ícono de cubo
- Funciona de manera que el usuario camina y mueve el teléfono para recorrer la escena
- Se puede ver más información sobre la torre en el tour digital oficial
Pipeline de creación con Gaussian Splatting y controles
- La escena fue creada con base en el reciente avance de Gaussian Splatting
- La escena se capturó con un dron
- Se alineó con RealityCapture
- Se entrenó con gsplat
- Se comprimió con SOGS
- Se renderizó con PlayCanvas
- Los controles de navegación admiten tanto escritorio como entradas táctiles
- Orbit: botón izquierdo del mouse o arrastrar con touch
- Pan: botón central del mouse o deslizamiento
- Look: botón derecho del mouse
- Zoom: rueda del mouse o gesto de pellizcar
- Fly: WASD o teclas de dirección
- Vuelo más rápido: Shift
- Vuelo más lento: Ctrl
- Reiniciar cámara: R
Interior de la torre y características estructurales
- En la pata oeste de Sutro Tower hay un elevador interno
- Pueden entrar dos personas con cierta incomodidad
- Cuando el elevador pasa por la parte media de la torre, cambia de estar inclinado hacia adelante a estar inclinado hacia atrás, lo que puede causar a los pasajeros una ligera desorientación
- El tiempo total del recorrido es de 8 minutos
- La estructura de la torre fue diseñada por Albert C. Martin & Associates of Los Angeles y fabricada y construida por Kline Iron and Steels
- Su altura es de 977 pies
- Sus cimientos están a 834 pies sobre el nivel del mar
- Sus tres patas están ancladas en 15 millones de libras de cemento
- En la torre se usaron 3.5 millones de libras de acero
- Por seguridad sísmica, su centro de gravedad real está bajo tierra, y está diseñada para que la torre se retuerza ligeramente con vientos fuertes
- Salesforce Tower mide 1070 pies, por lo que es un poco más alta que Sutro Tower
- Sutro Tower está a 834 pies sobre el nivel del mar, lo que le da ventaja en las vistas desde arriba de la ciudad
1 comentarios
Opiniones en Hacker News
En particular, si miras el mapa de Vienna, hay muchísimos lugares interesantes
[1] https://en.wikipedia.org/wiki/BBC_Domesday_Project
Sobre novedades de Gaussian Splatting, https://radiancefields.com/ sigue cubriendo muchos avances
El 5 de marzo habrá un town hall con presentadores de Niantic y Cesium: https://metaverse-standards.org/event/gaussian-splats-town-h...
El town hall anterior sobre splats y las presentaciones relacionadas están en la página de videos, y hace unos días también hubo una presentación de Adobe sobre Gaussian Splatting: https://metaverse-standards.org/presentations-videos/
Empecé tomando muchas fotos con encuadres amplios, y luego capturé una cuadrícula de fotos superpuestas con varios niveles de zoom. Si Photosynth todavía existiera, me gustaría volver a ver el resultado
[0] https://en.wikipedia.org/wiki/Photosynth
Me sorprendió que en modo VR se pudiera ver mucho más detalle, y antes de cambiar no había encontrado el easter egg
Debería haber estado sentado al empezar; la tasa de cuadros era baja y el horizonte también estaba mal orientado, así que casi me caigo mientras me movía hacia el sofá. Habría sido peligroso si no hubiera decidido depender por completo de mi propiocepción
Comparado con Inside the Scaniverse, que tiene una resolución demasiado baja, o con Horizon Worlds, que es plano y da pena ajena, definitivamente es un acierto. Tendré que volver a probarlo en modo tethering