Entrena modelos de 3D Gaussian Splatting a partir de fotos o videos y genera splats y mallas texturizadas con Vulkan o CUDA, sin Python.
Spirula Studio entrena modelos de 3D Gaussian Splatting a partir de fotos o videos sin procesar e incluye estructura a partir del movimiento (SfM), entrenamiento y generación de mallas en un único binario autónomo. No requiere Python, PyTorch ni una instalación independiente de COLMAP.
El backend principal de Vulkan funciona con GPU de NVIDIA, AMD, Intel y Apple en Windows, Linux y macOS. También hay disponible un backend de CUDA para GPU de NVIDIA. El proyecto destaca el entrenamiento cuantizado, capaz de manejar hasta 10 millones de Gaussianas SH3 con 8 GB de VRAM, y ofrece compatibilidad con cámaras ojo de pez y de 360°, incluidos conjuntos de datos equirectangulares sin corrección de distorsión.
El pipeline integrado incluye SfM, extracción de fotogramas de videos, enmascarado con IA mediante checkpoints de SAM, generación de mapas de profundidad y normales, y un visor web al que se puede acceder mediante reenvío SSH para entrenar con GPU de forma remota.
Descarga el binario para tu plataforma desde la página Releases
Clona el repositorio y entra en su carpeta (compilación desde el código fuente para Linux, con el backend Vulkan)
cd spirula-studio/Ejecuta el script de compilación de Linux con el backend Vulkan
bash build_develop.bash -DSS_BACKEND=vulkan -DSS_ENABLE_PATENTED=ONResumen generado por IA a partir del README del proyecto. Las estadísticas de GitHub se actualizan a diario.
Pipeline generalista de Structure-from-Motion y Multi-View Stereo, con interfaces gráfica y de línea de comandos para reconstruir escenas 3D a partir de imágenes.
Herramienta de programación visual de código abierto basada en nodos para fotogrametría: convierte fotos en modelos 3D, permite hacer seguimiento de cámara y crear imágenes HDR.
Un motor de videojuegos JavaScript de código abierto para crear apps 3D interactivas, juegos y visualizaciones con WebGL2 y WebGPU, que funcionan en cualquier navegador.
Un renderizador de Three.js para escenas de 3D Gaussian Splatting, compatible con WebGPU y WebGL2 y con LOD en streaming para modelos grandes.
Controlador de miniaturas para el Explorador de Windows que muestra archivos PLY de 3D Gaussian Splatting y proyectos de Spatialograph Maker sin abrirlos.
Convierte una imagen de un objeto en un modelo 3D Gaussian splat y genera las partes no visibles, como SDK de inferencia y demo.