Una NUEVA REVOLUCIÓN en el 3D 👉 GAUSSIAN SPLATTING 👈
Вставка
- Опубліковано 8 жов 2023
- ►Entra en hostinger.com/dotcsv y con mi código DOTCSV obtén un descuento exclusivo!
3D Gaussian Splatting es una nueva técnica de Inteligencia Artificial que te permite recrear escenas completamente en tres dimensiones a partir de un vídeo o imágenes. Promete ser toda una revolución en el mundo del 3D como lo fue la llegada de la tecnología NeRF, y hoy vamos a hablar de ello!
► Gaussian Splatting (Project page)
repo-sam.inria.fr/fungraph/3d...
► Dynamic Gaussian Splatting (Project page)
dynamic3dgaussians.github.io/
► Demo de Gaussian Splatting (¡Mola!)
poly.cam/gaussian-splatting?c...
📹 EDICIÓN: Carlos Santana y Diego Gonzalez (Diocho)
-- ¡MÁS DOTCSV! ---
💸 Patreon : / dotcsv
👓 Facebook : / ai.dotcsv
👾 Twitch!!! : / dotcsv
🐥 Twitter : / dotcsv
📸 Instagram : / dotcsv
- ¡MÁS CIENCIA! --
🔬 Este canal forma parte de la red de divulgación de SCENIO. Si quieres conocer otros fantásticos proyectos de divulgación entra aquí:
scenio.es/colaboradores - Наука та технологія
🔥 ¡Y aquí tenéis el tutorial de cómo entrenar vuestras propias escenas con Gaussian Splatting!
👉 ua-cam.com/video/hZBM_kjhHfc/v-deo.html👈
Buena promo bro 🤙
Distribucion Gauss bidimensional!
@@DotCSVLab lol respondiéndose a él mismoxD
He visto que se puede implementar con videos renderizados de blender para navegar en tu escena como si usaras cycles pero sin el ruido
Hola, minuto 12:52 se escucha sonido de mensaje entrante, muy buen video
Google Maps en 2030 va a ser una barbaridad
2025 :)
Todo esto avanza exponencialmente
Para 2030 google maps va a ser tecnología primitiva a comparación de lo que tendremos.
2025
No, en caso de google todo debería ser real
Lo mejor me parece que mas gente se interesará por esto (como yo) por la paga y por lo curioso que es, acelerando asi el progreso
Si no explota el mundo antes😂😅
La manera en cómo explicás temas complejos de una manera tan comprensible y con una excelente animación es algo que no deja de sorprenderme. Saludos desde Arg, gracias por tu dedicación a la divulgación, Carlos.😃
Wow, todavía tiene muchos detalles que pulir pero poco a poco se va acercando más a la realidad. Esta technologia nos permitirá trascender de muchas limitantes actuales, esperemos un par de años a que evolucione.
Siempre he pensado que en el futuro, las retrasmisiones deportivas, por ejemplo un partido de futbol, será una representación volumétrica (ni sabía el nombre pero si imaginaba el concepto), en tiempo real de todo lo que pasa en un campo de futbol, y el "espectador" podría ponerse donde quisiera, en la visión de un jugador, de forma cenital, desde la banda, etc....
Muy buena explicación, gracias. Me hace acordar a los mapas de Desplazamiento Vectorial su funcionamiento, muy parecido
Avanza la simulación dentro de la simulación.
tio, la edición de este video es una pasada. Enhorabuena al equipo! El contenido, como siempre, brutal
me faltan 5 materias para ser ingeniero electromecánico, hace años que entre mis objetivos de año nuevo esta aprender a programar, se diseñar en 3D, todo, no importa la forma, si es algo estetico, funcional, ingenieril, no hay cosa hasta ahora que no pueda hacer en 3D, desde el 2011 autodidacta en eso e ingreso a ingenieria en 2014. Aprender a programar me parece algo tan gigante que no tengo la voluntad para pasar por la etapa de aprendizaje autodidacta, porque se lo que se requiere. Yo se todo lo basico, medio y avanzado en matematica, o alguna vez lo vi y lo aprendí, lo entendí y lo aprobé, me muestran un codigo, y por instinto lo saco, es como los que entienden ingles pero no pueden hablarlo ni escribirlo. Necesito algo, consejo, reto, vivencia, algo que vos lector creas que pueda ayudarme para poder por fin programar, y claro que lo mas probable es que se termine combinando con ingenieria y 3D, como claramente este video muestra, con gauss (que lo usé hace 1 año para demostrar en mi pasantia que la mitad de los transformadores electricos de mi ciudad estan pesimamente mal utilizados), con esto las IAs van a poder tener una vision virtual del mundo real, y yo ingeniero especializado en el 3D claramente podria estar trabajando en lo que falta para unirlo con las mallas 3D asi poder meterle ingenieria a esa vision.
excelente explicacion Carlos, como siempre un gusto ver tus videos!
Increible! Cuento con gafas VR y estaba ansioso por la llegada de este nuevo avance! Felicitaciones como siempre por el nivel de aporte que realizas a toda la comunidad! Abrazos!
la calidad es brutal yo he estado 3 semanas con esa tecnologia
Muchas gracias de nuevo un gran video ❤.
Great video and very very deep analysis into the world of Gaussian Splatting. Good job! Thanks for the shout out!
14:28 Dependerá del material en el que incida la luz.
Es curioso como al final tiende hacia la estructura de la materia que son los átomos, porque al final entre los atomos hay vacío, pero juntos forman redes tridimensionales que conforman los objetos, al finam como pasa con este metodo de "manchas"
Muy muy muy bueno. espero con ansiedad entrenar mis propias escenas con Gaussian Splatting!
no falla la informacion veraz y siempre super interesante, gracias por la divulgacion y Excelentes aportes!
Cada vez tus vídeos son más impresionantes. Enhorabuena.
No puedo dejar de pensar en las Neurodanzas del Cyberpunk 2077, pero qué genial es esto
Es impresionante cómo la calidad de tus videos no deja de aumentar. Felicidades, Carlos. Hacés siempre un trabajo excelente.
siempre buen material y bien explicado desde hace años :) gracias
Excelente tecnología y super clara la explicación! Muchas gracias por estos videos!
Increíble. La representación y el movimiento libre de la cámara me hace acordar mucho a la película Déjà Vu de 2006
7:19 Carlos, los videos donde explicas de forma simple las matemáticas son mis favoritas, hasta deberías tenér una sección a eso sobre todo temas de estadística
Genial como siempre, Gran DotCSV
Te sigo desde hace muchísimo tiempo aunque no haya dicho nunca nada, pero tu trabajo, esfuerzo, pasión y dedicación, se merecen un aplauso mundial...
Muchísimas gracias Dot
P.D... solo una cosilla, una circunferencia no es más que una elipse con los focos en el centro, por eso me he animado a comentar. Al ver el video sabía rápidamente que al mover los parámetros en x,y de la curva de Gauss saldrían elipses de diferentes excentricidades...has cometido ese pequeño error de llamar "circunferencias" a lo que son elipses... tómalo como una pequeña crítica totalmente constructiva y aquí me tienes para lo que quieras, de verdad, Eres genial
Un abrazo Dot
Rafa
Espero con ansias el video de labs!!! Excelente aporte Dot!
Da gusto disfrutar de explicaciones de altísima calidad como esta, en términos de capacidad de comunicación, contenidos y producción del vídeo, recursos, etc.
¡Enhorabuena y muchas gracias!
Impresionante, gracias por la explicación.
Mi idea de poder entrar a cualquier escena de cualquier película empieza a tener más sentido, pensaba yo en IA's que determinaran profundidad y tipo de lente usado en cada escena, pero es más útil así. Pronto podremos vivir en primera persona las escenas más icónicas de películas solo faltaría eliminar a los personajes añadir NPC's preanimados, correr el audio y... "De todas las IA's, de todos los motores gráficos, de todas las técnicas, ella tenía que venir a la mía. Louie, toca cualquier canción, todo menos reggeton"
Pues entonces es una IA Hiper-Inteligente, felicitaciones.
seria interesante ver como los estudios de animacion como pixar o dreamworks utilizaran esta tecnologia
En realidad asi a primeras no les sirve de nada, esto es para crear 3D basado en fotos reales, todo lo que no sean entornos reales van a tener que seguir haciéndose de forma tradicional.
si eso pense igual, digamos que si la IA pudiese transformar las cosas 3D que se hacen en gaussian, serial la perfección total, indicarle a LEONARDO u otra IA, tengo esta escena en gaussian pero quiero que los transformes en un ambiente estilo disney o al estilo steampuk, imaginate las posibilidades @@elramon
@@elramonanimación stop moshon? Son animaciones dónde se emplean maquetas reales .
@@elramonte equivocas, si la pelicula ya terminó su producción y edición, quizá el director quiera modificar ls posicion de las cámaras. Y con esto podrá hacerlo.
No sera necesario volver hacer toda la escena
@@Felhek Creo que eso seria un problema, para tener la mayor limpieza en esos manchones hay que tener diferentes angulos de cámara, muchos mas de los que a un cineasta le gustaria, osea , solo ve el ejemplo del video a tiempo real, literalmente ves todas y cada una de las cámaras, incluso si quitan la cámara en post, se veria feo aun
Eres un profesor nato, explicas haciendo entretenido cosas muy técnicas, aunque eso del descenso del gradiente suena cómo el ocaso del samurai 🤣(Muy buena película por cierto).
descenso del gradiente es simplemente una algoritmo para hallar los parámetros correspondientes para minimizar una función
@@diegoluna17 El ocaso del samurai es el declive de la era samurái en Japón durante el período Edo (1603-1868). Se refiere a un ronin (un samurái sin señor) que llega a un clan feudal en busca de cometer harakiri (un tipo de suicidio ritual) como una forma de protesta y para exponer la hipocresía y la brutalidad de los samuráis y sus señores. El ocaso del samurai es una critica de la decadencia moral, ética, poder y status de esta clase de guerreros siendo siendo desafiados y desintegrados su código de honor en una sociedad cambiante.
Buen video!!!Maravilloso!!Saludos.
muy bueno gracias!
tremendo!! el contenido y el trabajo de producción del video! capo.
Excelente explicación! Este canal es una joya 💎!
Imaginense como serian los simuladores de entrenamiento con estas tecnicas, podriamos estar ante lo que puede ser Matrix en sus inicios
Espectacular video!!!
Bro cada vez que sacas estas divulgaciones mi mente explota de dopamina, solo el imaginar las aplicaciones en la industria naval me hace querer tenerla de inmediato. Gracias por tan excelente explicación animada, que buen equipo de trabajo. Saludos y mucho éxito. Los sigo de cerca! Abrazos.
Hola Dot, molaria un video dedicado al problema de alineamiento, singularidad, desplazamiento de trabajo y demas posibles problemas desde tu punto de vista. Felicitaciones por tu canal
Impresionante, muy buen video y muy bien explicado.
Felicidades por el vídeo. El nivel de edición para las explicaciones es de 10.👏🏻👏🏻👏🏻 Bravo. Mi pregunta es si lo hacéis a “mano” o utilizáis alguna IA para hacerlo?😁😉
Son adictivos tus videos. Que buena forma de educar que tenes!
Me alegra mucho que vuelvas a subir videos.
La calidad de tus vídeos permiten viajar por la imaginación como si fueran imágenes reales. Con tu canal se siente el futuro en el presente.
Excelente herramienta. Estábamos pensando en hacer un framework para convertir en VR modelos en formato GLTF y esto nos va a acortar mucho el trabajo de armar los modelos. Además tenemos una GoPro 360 que podemos usar para aramar videos compuestos.
Diego Racero desde Argentina, el proyecto lo vamos a desarrollar en FIUBA.
Genial como siempre!! El mejor divulgador de IA!
Me ha encantado toda la extensa explicacion que has dado, soy muy seguidor de Gauss Jordan a la vez que me mostro una nueva forma de ver las matematicas (como veras soy un nerd...jajaja)... por favor sigue haciendo videos asi (no te mentire no eres el unico que sigo sobre el tema de IA), pero has sido el unico que he visto que fuera del ambito comercial, explica el "por qué" de las cosas y siempre me ha parecido algo fundamental a la hora de enseñar cualquier tema...gracias
Eres un capo, tus videos le dan sentido a la vida, despertando el interés para aquellos que nunca dejamos de investigar. ¡Saludos desde Colombia!
Excelente video, muchas gracias
Que buen trabajo! Gracias
Buenísimo!!!, me encantó!!!, ojalá pronto se pueda aplicar a diseños arquitectónicos!...gracias por estas actualizaciones!! 👌💯
Creo que ya lo han usado, el problema es que se ve mal debido a que quienes lo hicieron movian la cámara de maneras que se sentian anti intuitivas y mareantes, como esas montañas rusas en 3D.
Creo qeu alguien que sepa usar los mejores ajustes de cámara (que hay que tener conocimiento de ello) lo haria mejor
Estos vídeos son súper ilustrativos. Se ve claramente cómo el salto de lo que puede hacer la máquina se corresponde con el salto cuando uno pasa de la matemática del plano, con los recursos del cálculo de una variable, a la matemática más sofisticada, con los recursos de la variable compleja y el cálculo de varias variables. Lo que me lleva a pensar que una condición de posibilidad (ni siquiera de suficiencia) para que la IA llegué a emular cualitativamente la inteligencia humana es obtener un modelo matemático del cerebro. Algo que se ve muy muy complicado.
La tecnología es flipante, pero la forma en que lo cuentas es todavía más flipante !!!
Muchiiiiiiiisimas gracias por compartir!!!!
SIEMPRE ME PREGUNTÉ COMO SERÍA EL CINE O LAS PELÍCULAS EN EL FUTURO, ME IMAGINABA PELÍCULAS EN 3D EN DONDE UNO PUEDA MOVERSE DENTRO DE LA ESCENA COMO UN ESPECTADOR INVISIBLE, PERO PENSÉ QUE IBAN A PASAR COMO 500 O 1000 AÑOS HASTA QUE FUERA ALGO ASÍ, AHORA YA ESTOY VIENDO ESTA TECNOLOGÍA...
La gente suele ver el desarollo tecnologíco de forma lineal pero son como grandes saltos exponencial
He si ya llega ese día para ver Godzilla 🤌
@@zetatreck9966mmm yo quiero que me devore la papirola en tiempo real
Gracias por este contenido campeón, me gustaria saber que avances hay en ia con respecto a la web. Dentro de poco realmente se podrán hacer web e ecommerce super profecionales con ia? ya se estan haciendo? etc.
Que buenos videos , gracias por compartir esta información tan valiosa
Que barbaridad gracias por tu gran analisis y trabajo bro te sigo hace mucho y me encanta verte crecer junto con las inteligencias artificiales ❤️
Carlos, si el voxel es la unidad mínima de representación volumétrica de un objeto 3D, las "manchas gaussianas" serían una especie de meta-voxels (o macro-voxels) que componen un cuadro 3D. Interesante concepto.
Me encanta esta tecnología, me asombra cada vez mas el futuro que se acerca
Recién descubrí tu canal, es una joya❤
Min. 18:35 Me recuerda al video de The Impossible Rondo donde salen diferentes Messis.😮
Gracias. Buen trabajo.
que guapa la edición de la varianza y la media
21:17 Y en Unreal.
Hola Carlos! Interesantísima la tecnología. Lo que no entiendo muy bien es por qué se hace referencia a los tiempos de entrenamiento. Un usuario debe reentrenar los modelos en algún momento? Entiendo que para el usuario final sólo aplica la inferencia. Gracias!
Es una especie de espacio de voxels pero en vez de voxels usa los gaussian splats esos que añaden información extra para en vez de generar un cubo generar esa "pincelada virtual". Matemáticamente es muy distinto, pero a nivel conceptual el uso que se le da es muy parecido.
Aun así no veo como estas técnicas pueden permitir el tu introducir una nueva fuente de iluminación sintética o cambiar la iluminación de la escena de cualquier otra manera, pues ese tipo de cálculos de iluminación no están embebidos en la lógica del propio proceso de creación de la imagen y por lo tanto no se pueden modificar, con lo que está muy bien para recrear escenas existentes y verlas desde ángulos nuevos pero su utilidad es muy limitada.
De hecho la integración de un set de estos, per. una persona en otro escenario queda fatal porque la iluminación no es congruente.
*Esto utilizado en imagenologia y radiologia en medicina seria demasiado alucinante y disruptivo*
Gracias por tu trabajo!😁
Wey, amo tus vídeos, te amo porque por tí, me interesé y me actualicé
Madre mía!! Que gozada.
Ya le di like al video y ni lo he visto, esque nunca decepcionas ❤
halucinante, las posibidades son infinitas. Esto es imparable .
Ah! aqui una anecdota graciosa con tu voz ;) hoy cambie la velocidad del play a lento 0,25 para fijarme en los efectos de video ! y el escucharte con la voz ralentizada y con las cosas halucinantes que explicas, me ha hecho reir un buen rato (amablemente) A sido divertidisimo, te invito a reirte y sobre todo hacia el final.
Eres buenisimo, gracias por compartir tu conocimiento, y ayudar a los demas a entender la que se nos viene con la AI
no se podria asignarle un poligono a cada mancha y asi hacer una reconstrucción 3d de la escena, en poligonos?
Que bueno que hicieras algún video que hablara sobre los problemas de seguridad que traen consigo estas nuevas tecnologías, de hecho cada tecnologia podría generar un video espejo con esta temática, algunos expertos en el tema hablan mucho de estas cosas y son muy interesantes y pocos las conocen. Además sería lo más responsable que se puede hacer teniendo un impacto tan grande en la audiencia como el tuyo en estas cosas.
Muy interesante interesante, conocía de la campana de gauss, pero nunca me imagine que aquella representacion gráficas qué nos enseñaron de estudiante, podría desembocar en 4D
Muy interesante el vídeo. Te suena si hay alguna IA que renderice fotogrametría para producir una maya 3D imprimible? Es decir que dada una serie de fotos sea capaz de generar un fichero STL?
Gracias por el vídeo, fue muy interesante
Quiero felicitarte por el excelente trabajo que realizaron en este video. Usualmente no consumo videos en Español cuando trato de aprender sobre este tipo de cosas debido a que generalmente la producción y calidad son inferiores, pero en este caso tu video lo encontré mejor que las explicaciones que vi en Inglés. De nuevo, muchas gracias, haré un binge-watch a tu canal.
Esto está increíble! 🤯
Este video es una masterclass🎉!!!
Imagina ver una película y poder mover la camara libremente
Muy interesante y buen vídeo, dicho sea, pero realmente me plantea más preguntas, sobre todo por qué es tan innovador en la representación del 3D. Realmente se podría aplicar una técnica parecida con polígonos y texturas de toda la vida: bastaría modelizar en una red no entrenable el renderizado (como red para generar la salida para poder aplicar el algoritmo del gradiente) y dejar en otra red entrenable que represente el modelo 3d concreto la posición, tamaño, orientación, color, etc. de los polígonos, (o incluso texturas aumentando el número de parámetros entrenables y cambiando el modelo) y entrenar la red completa con el conjunto de imágenes 2D generadas respecto a reales. No entiendo qué ventajas supone el uso de trazos gaussianos coloreados (por llamarle así al modelo que usa).
Supongo que tendré que leerme los estudios si quiero enterarme.
gracias por estos buenos videos! :)
En arquitectura, utilizamos mucho la tridimensional, generando modelos 3d, con renderizacion, esta nueva tecnología creo que permitiría mejorar la presentación de proyectos arquitectónico, llevándolas a tener más realismo en texturas y movimientos.
20:58 Tecnología prematura que se mueve muy rápido... Las técnicas son las mismas que en los años 60, sólo que ahora el hardware es más potente.
Increíble video, como siempre.
Todavía no ha pasado ni un minuto de video y ya estoy muy hypeado.
12:52 fui el único que fue a mirar la notificación?
Puff super interesante Bro! Me hace acordar cuando experimenté el Rockstar Editor y componer escenas con fragmentos del videojuegos ya grabados, poniendo la camara donde se nos ocurra. Y si lo llebamos a la realidad es como en la pelīcula Deja Vu, donde pueden rotar la camara y reposicionarla de una escena ya grabada! Puffffff
Muy bueno. Quizá tenga muchos beneficios en imagenes médicas
algunas imágenes me hicieron acordar, cuando en un ambiente se tomaban nubes de puntos y estas se llevan al programa de visualización, grandes empresas se fueron por ese camino para el tema de reingeniería.
11:04 ¿4 dimensiones?
Al acceder a los proyectos, me da la sensación que estuviese entrando en un sueño. Quizás estas tecnologías conviertan los recuerdos y sueños en algo navegable, que posibilite explorar.
Tiene algo que me hace recordar el metodo LIDAR de captura
gran video como siempre, también me gustan mucho las animaciones! se puede saber qué están usando para hacerlas?
Podría decir que es Adobe After Effects.
Qué música suena en el minuto 4:36? Hace tiempo que veo vuestros videos y se nota el salto en edición, felicidades! 🎉
Por mas interesante que sea, y util, tambien hay que tener en cuenta , por favor, que generar fotogrametría a partir de , por ejemplo, modelados 3D que pertenezcan a artistas y que solo hayan subido al publico previews de un modelado 3D no te hace dueño de ese modelado 3D.
Los artistas estan a favor de herramientas de deep learning siempre y cuando los datos de entrenamiento/ajuste sean debidamente licenciados, que la técnica sea una fotogrametría + captura de movimiento, no hace que puedas tomar los datos de los demás y pasarlos por aqui para apropiarse de ellos
Por lo que he visto, no parece requerir demasiados datos de entrenamiento mas alla de imagenes en diversos angulos para aumentar la fidelidad y generar un mapeado 3D a partir de manchones gausianos a diferencia de otros modelos regenerativos que podrian considerarse mas como motores de busqueda interpolativos, de hecho esto me recuerda mucho a pintar en VR en 3D, solo que aqui seria tomar fotos en 3D, por supuesto por lo que he visto hay que estar bastante quieto si no tienes una gran cantidad de cámaras a tu alrededor.
Aqui es donde me entra la duda, se que es necesario una red neuronal para que funcione ya que su ajuste esta en recrear lo mas cerca los datos originales, en este caso, los manchones que representarian un modelo 3D, pero aqui es donde me entra la duda, es posible que no se requiera de un pre entrenamiento como los modelos regenerativos y solamente un ajuste posterior de los nuevos datos como se ha visto? porque seria un buen avance , seria un sistema de fotogrametría interesante en terminos de rendimiento
Tus animaciones son geniales. Las haces con after effects?
yes
Podrías dedicarte a lo que te diera la gana y lo harías bién, el ser humano más dinámico del mundo, lo q cuentas es la hostia, pero como lo cuentas es la super hostia. Un gustazo!