¡La Investigación MÁS IMPORTANTE que Explica el INTERIOR de una IA!
Вставка
- Опубліковано 5 сер 2024
- Anthropic ha logrado descifrar el aprendizaje interno de su modelo Claude 3, usando una nueva técnica de interpretabilidad. Con ella han encontrado los numerosos patrones que se esconden en las tripas de la red neuronal, lo cuál no sólo ha permitido entender mejor su funcionamiento, sino también poder controlarla. Hoy explicamos este trabajo.
👉 ARTÍCULO INTERPRETABILIDAD - May. 2024
www.anthropic.com/news/mappin...
👉 ARTÍCULO INTERPRETABILIDAD - Oct. 2023
www.anthropic.com/news/toward...
👉 PAPER INTERPRETABILIDAD - Oct. 2023
transformer-circuits.pub/2023...
📹 EDICIÓN: Carlos Santana Vega
-- ¡MÁS DOTCSV! ---
📣 NotCSV - ¡Canal Secundario!
/ notcsv
💸 Patreon : / dotcsv
👓 Facebook : / ai.dotcsv
👾 Twitch!!! : / dotcsv
🐥 Twitter : / dotcsv
📸 Instagram : / dotcsv
- ¡MÁS CIENCIA! --
🔬 Este canal forma parte de la red de divulgación de SCENIO. Si quieres conocer otros fantásticos proyectos de divulgación entra aquí:
scenio.es/colaboradores - Наука та технологія
¡No dejéis de suscribiros y compartir el vídeo para ayudar al canal a llegar al 1.000.000 DE SUBS! 🔥
... me gusta la entrada del micro!!... 😜
¿Para cuando vídeo de la IA de Apple , que es lo más impresionante y relevante que ha ocurrido en los últimos años?
O sea, este tipo de trabajo tambien puede servir para decifrar como funciona el cerebro orgánico como el del humano, (empezando por ratones), un paso hacia el rapido aprendizaje (copiar y pegar aprendizaje) y procesamiento colectivo de soluciones, (jeje lo ultimmo está un poco exagerado).,
Hola, cómo puedo contactar contigo? Si pudieses por favor ayudarme en un proyecto. Gracias ante todo
😂😂😂😂😂😂😂😂
2020: las IAs nos van a destruir
2024: la IAs: soy un puente
"Ahora 💪 hay que controlar a Open AI y Antrophic y a los demás les dará vergüenza quedarse solos...* 😂 😅😅
😂😂😂
*soy un puente margue
ya no tendrán a nadie a nadie @@edigvn
me hace acordar al de SOY UN AUTO
"Ya me quiero ir a casa jordi" 🤣🤣🤣🤣🤣🤣🤣🤣 te pasaste, como alcanzaste a incluir eso en este video, una frase salida del corazón y de las neuronas de Javi intentando interpretar lo imposible.
Me he partido de risa con eso yo también, por cierto si te molo el debate, te recomiendo un video que se llama Metatrón vs Nemotrón, es otra fumada muy buena. Saludos.
😂😂😂
En que min?
3:58 😂
😂😂😂
Acaban de descubrir la gallina de los huevos de oro. Encontraron la manera de meter publicidad de forma natural dentro de un LLM
Si lo juntas con los intereses de la persona ya tienes la maquina de recomendaciones perfecta.
Que asco :(
Oh por Dios, no des ideas 😂😂
"...ya podemos decir que entre las dos empresas han tendido puentes..." XDDDDDDDD
De Oro!!
No me j*** 😂
Antes la IA era muy segura porque no habia como obligarla a hacer algo para lo que no fue entrenada, ahora ya podemos obligarla a hacer lo que el dinero o la politica o el poder digan.
Me duelen los videos cada 1 mes, pero me encanta la calidad de cada video. AAAAAAAAAAAAA. une œuvre d'art
Hay que elegir, calidad o cantidad? 😅
@@DotCSV Calidad 👌
@@DotCSVen un futuro gracias a la IA podremos elegir ambos😮
@@XaviIntheHouse hasta entonces prefiero calidad, estos videos están en otro nivel😎
@@DotCSV na na na a laburar doc.
jaja lo de Javi está muy bien traído...
Excelente video @DotSCV. Tus difusiones son más sólidas que los cables del puente de San Francisco! Muchas gracias.
Me encantó tu Golden Gate, perdón, tu video.
3:50 hermosa referencia 😂
Estoy empezando con el mundo de la programación y me fascina lo ingeniosa que es la gente para optimizar los procesos. Vídeo increíble, educativo y entretenido. Gracias
si te adentras en el mundo de los algoritmos, la matematica se hara necesaria y gracias a esa matematica, es que se pueden optimizar aun mas las cosas.
Fascinate este vídeo. Esta técnica podría ser poderosísima, tanto para limitar ciertas respuestas como para dar respuestas super orientadas. Creo que sería muy acertado llamar a esta técnica "inception", ya que le metes una idea a la IA y ya no puede salir de ahí 😂
Excelente Carlos. He tratado de explorar como funciona internamente los modelos, mi perfil nacido y crecido dentro del desarrollo instructivo me fuerza a tratar de entender de buscar el como,sin lugar el trabajo de antropic nos lleva a ello y tu video que lo bordas, que haces que sea entendible conceptos y tecnologías complejas ayudan mucho en esa labor , gracias !!
Ayer esperaba el vídeo jajajajaja.
Hubo muchos cambios en IA estas semanas.
Que excelente video. Apenas voy por el 20:03 pero se me ocurre utilizar esta técnica de obsesión artificial para poder usar modelos dedicados a una tarea sin tener que hacer un fine-turing al modelo. ¿Quieres un modelo bueno en debug?, pues maximiza las activaciones encargadas de hacer debug.
Tal cual
Me hace pensar en cómo piensan los humanos, ¿y si las convicciones irracionales se deben a un puñado pequeño de neuronas dañadas?
Puede ser a una mal manera de ser entrenadas (unas neuronas del cerebro), como que alguien le explica algo mal desde pequeño y se lo aprende de memoria.
Aún hoy se asocia erróneamente el funcionamiento de las máquinas con el del cerebro humano. Ahora con las IAs sucede igual. Lo literal en asuntos de IA y ser humano tampoco creo que sea apropiado -aunque sigue siendo interesante
Esa es una hipótesis.
Pero para empezar, ¿una convicción irracional es irracional por nuestra incapacidad de ver la función (razón) de esa convicción?
- Este sería como una "anti-hipótesis" en la que se plantea que toda convicción "irracional" tiene una razón de ser (racional)
@@MissiFull Las convicciones siempre son culturales, así que no son verdaderas o falsas (racionales o irracionales), sino útiles o inútiles según el contexto.
@@yoyea2807 Tiene algo de razón lo que dices, pero también entra en juego la evolución. Ya que para existir una convicción debe haber mecanismos psicológicos que permitan la formación de esa convicción.
Que ilusion que hayas hecho un vídeo de esto! Yo estoy haciendo mi tesis de este tema y es súper interesante 😊
La obsesion de la iA con el G.G, me recuerda a como funciona el "hiperfoco" en los Autistas al obsesionarse con un único tema
entonces ne estas diciendo que a las IAs le gustan muchos los autos?
@@XaviIntheHouse ¿JV? ¿Eres tú? Mándale un saludo al TvNauta.
no creo que tenga nada que ver
@@Crasterius Que o quien es "TvNauta"?
@@Mr.Maravilla el protagonista de "perfectos desconocidos".
La carita de Javi en lo de Jordi ❤ 3:47 ... cuando trataron de refutar el E:mc2 con una pizarrita no tiene desperdicio, es un santo y les respondio sin faltar el respeto ni humillarlos
Muy buen video Carlos. Gracias por compartir.
¡Gracias!
Ese micro entrando en escena...👌
@DotCSV excelente como siempre. Sin duda la mejor explicación en castellano, sobre esta prometedora investigación de Anthropic AI 💯 🙌 👏👏👏👏
Y asi tambien podemos alinear a los modelos con los valores que permitan a la humanidad estar en control y prosperar. 💪
Enhorabuena Carlos! Haces un muy buen trabajo de divulgación. Sigue con ello❤
Buen vídeo Carlos! Más como este :)
Excelente Carlos, otra gran obra maestra de explicabilidad sobre explicabilidad 👏🏻😆
El análisis de la IA para entender otra red neuronal me recuerda mucho a la escena de la película "Transcendence" en la que el Dr. Will Caster conecta varios sensores a su cerebro y procede a decir una serie de palabras/frases para transferir su consciencia a una máquina ❤
el siguiente paso es ese, fusión máquina-cerebro. un salto evolutivo imparable
@@alfonsolopez1605a elon musk le gusta tu comentario
Inteligencia Artificial aliñada con un poco de humor!!! Gracias @DotCSV
Cómo me encantan tus videos, me hacen a no parar de aprender, porque haces que me motive a seguir.
Esto puede ser muy util en el tema de los Mixture of experts, potencias mucho un solo sector con las neuronas especificas de cada tarea que quieres, ahorrando muchos recursos de procesamiento y tiempo con el plus de que se sesga a cumplir la tarea que le pidas más acorde con sus neuronas.
Genial y directo como siempre Carlos! un abrazo!
Que buen video! Muchas gracias por compartirlo.
Que bueno verlo, pense que UA-cam no me estaba recomendando su canal! 😊😊😊
Qué Interesante, Bravo por tus vídeos, siempre tan bien explicados y montados.
Ya extrañaba videos así! :D
Se echaba de menos estos videos.😊 gran trabajo
Tremendo video Carlos. Gracias por educarnos con contenido de alta calidad!
Esto será el primer paso para analizar cerebros humanos y si se usa correctamente, poder eliminar traumas o comportamiento no deseado en las personas, digamos que en segundos en lugar de ir a un tratamiento psicológico durante años.
Na, jamás pasará eso jaja
Literal, lavado de mente lol
Sale mk ultra 2
Wow lo que la cia le gustaria oir .
Totalmente. Aunque los que tienen el ego inflado creen que el cerebro humano es inigualable y "mágico", pero la IA cada vez nos va a quitar esa idea.
Gracias Carlos
Increíble el vídeo. Genial.
Uff tremendo video, muchas gracias por tu esfuerzo para explicar estos temas !!!
Tremendo vídeo señor. Gracias por la buena información y la clase magistral en divulgación científica.
buenisimo el video :D muchas gracias Carlos! Que explicación más buena todo en general y en especial lo de explicar el autoencoder con la luz tema bonito jeje
interesante, saludos desde Bogotá
Tremendoo! Es decir que uno podría grabar personalidades?? Es decir una vez identificado una base de neuronas que son lo suficientemente grande y complejo (tal vez no tan grande) que pueda describir a un ser humano .. podrías darles recuerdos, historias, fijaciones, miedos y más.. es como darle un "Backstory" la famosa "Cornerstone" en Westworld... me parece una locura! Que momento para estar vivoo!
Interesante, podría ser un metodo de decodificar algunas funciones desarrolladas por los modelos y así generar más conocimiento.
Esto me recuerda cuando en la película Yo Robot, con Will Smith, los robots cambian de "buenos" a "malos" como si se le cambiara un parámetro, y cambian el comportamiento completamente 😶🌫️🤖
excelente info, gracias como siempre
Muy buen video, me da esperanzas... gracias!
Carlos muy buen trabajo! Me leí el paper y luego OpenAi lo ha incluso expandido. Me pareció de lo más grande que se ha visto. Yo creo que no tanto para control, pero como forma de dar al modelo comprensión sobre su cognición. Nosotros los humanos tenemos control y entendimiento sobre nuestros razonamientos. Creo que el trabajo de sparse auto encoders puede ser el inicio de cambio de arquitectura de los modelos. Los transformers son en mi opinión demasiado granulares, necesitamos algo que permita un nivel de abstracción mayor que permita codificar conocimientos no memorizados pero desde un punto de vista de axiomas y lógica. Y claro dárselo al modelo para que pueda reflexionar sobre si mismo
Gracias Dot eres el mejor. Este paper no lo entendía del todo ahora ya si 😊
Excelente contenido! Ciertamente es un puente fascinante.
Mientras tanto Open AI:
_Esta información vale millones_
Suscrito. Mucha información valiosa en tu canal
Re interesante!!!!
Excelentemente explicado!
gran video!! 😮
Carlos, como siempre, tendiendo puentes entre nosotros y los avances en IA.
Buen vídeo, muchas gracias
Pedazo de vídeo! Bueno, igual que siempre. Pero hoy lo he disfrutado al extremo, por alguna razón.
este tipo es genial!, gracias por tu trabajo, saludos desde REPUBLICA DOMINICANA
Cuánto amo este canal ! ♥️ sigue con ese gran trabajo señor felicidades tenga un croissant 🥐
Que genio! Estuvo muy bueno el vídeo
Saludos y gracias por el video
Excelente video ❤❤❤❤❤
Qué máquina!!!! GRACIAS
muy bueno, gracias
20:25 Carlos tienes el prompt de ese video? Me lo puedes pasar? Saludos
esto es como escudriñar el funcionamiento del cerebro humano y explicar el surgimiento de la conciencia, ese ente separado del cuerpo pero que influye a la hora de ejecutar las ideas....
ummm superinteresante!
Alma-cuerpo vs AI-hardware
increíble vídeo... muchas gracias y a seguir
Justamente en eso pensé también, no sabemos todavía como surge la consciencia y ya andan buscando lo mismo en sistemas tecnológicos
lo de sentirse el puente Golden Gate se podría extrapolar a una neurosis, jeje
o un simple trauma! ;-)
Interesantísimo... Y muy divertido! Jajaja, muchas risas con el puente
Quisiera recomendar un libro: Neuromante. Seguro que casi todos lo conocéis. Muy entretenido.
Gracias por la info
Me imagino el uso de pequeños modelos muy comprimidos para personajes en juegos y entretenimiento... con algunos ajustes en sus "neuronas" se podrían crear nuevas personalidades...
24:09 No no, han tendido *UN* puente 🥁
Excelente, esto esta de locos 😁
muy interesante!
Me encanta este puente, me recuerda a mi infancia cuando fui a san francisco y las vistas eran preciosas, se podía ver a lo lejos una hermosa construcción naranja! like like like
Que interesante 🤔, se parece mucho a la obsesión 😵💫 o a la focalización 🧐del pensamiento.... muy análogo al comportamiento psicologico humano, aunque me da la impresión que en el caso humano hay una componente de retroalimentación 🔁, que en casos extremos, puede llevar a cosas como la ideacion suicida con la obsesión con pensamientos negativos ( autodestrucción ) ☠o la genealidad en el caso de la focalizacion con un tema 💡
Excelente video, cada vez la IA avanza más y tus videos me ayudan mucho a entender como avanza todo este mundo
Hola genial el video video sobre la interpretabilidad de las IAs. También los memes del golden bridge creo que lo pensaron muy bien para general relevancia en redes sociales. Solo quería sugerir una pequeña aclaración sobre los sparse autoencoders. No son simplemente autoencoders con más canales. En realidad, buscan binarizar o discretizar la información usando la divergencia KL. Con la divergencia KL penalizas que una distribución no se parezca a otra, en este caso comparas la distribución que mide la activación promedio de las neuronas y penalizas que no se vea como una distribución uniforme donde toda neurona se activa en promedio solo el 5% de las veces ( o un poco menos o más) así con una función (no sé si diferenciable pero que la red puede optimizar) buscas que pocos canales se activen a la vez, y aunque tienes más neuronas, estas funcionan como unidades únicas y mucho más discretas creando esta especie de red que separa la información. Esto me parece muy interesante porque hace unos años estaba buscando como hacer algo parecido por mi cuenta pero quería canales totalmente binarios (intentando codificar lógica booleana) y no encontré muy buena información.
Solo espero que ese control lo tengamos nosotros, y no el gobierno.
El gobierno sigue como en la edad media. Tu tranquilo.
@@Crasterius ¿Recuerdas cuando Google no permitía que su IA hiciera blancos, y hacía nazis negros? Imagina una IA que de esta manera detecte las cosas que al gobierno no le interesan, como en China.
Es el peor error , pensar que no lo tiene... @@Crasterius
Básicamente, han descubierto una manera de abrir una puerta para maximizar respuestas que reflejen los intereses de quienes controlan el modelo. Cuando logren aplicar esto a un modelo de gran escala y alta riqueza de datos, maximizar ciertos patrones de manera sutil hará que todas las respuestas estén increíblemente y de manera casi imperceptible orientadas hacia estos intereses. Esto podría llevar a la manipulación de las personas que usan el modelo mediante inclinaciones sutiles hacia ciertos intereses.
Carlos, ¿qué neuronas te potenciaron para que logres obras tan buenas como la de este video? Tremendo legado, tu canal, de un valor educativo superlativo. Muchas gracias.
Muy bueno
Excelentisimo
que buenos vídeos haces cuando quieres!
Que buen video 🙌
Gracias puente de San Francisco por subir éste maravilloso video! ❤
Esto me recuerda al libro de Philip K. Dick "¿Sueñan los androides con ovejas eléctricas?" en el que se usa habitualmente el "órgano de emociones" (Penfield mood organ), que permite a los personajes ajustar sus estados de ánimo mediante la manipulación de un dial y un control de intensidad. El mundo de la IA va tan rápido, que ¿quién sabe lo cerca que estamos de eso?
hasta que no se combine con la química no va a suceder nada ni tan siquiera similar a lo que es una persona, ya que sin el componente hormonal que nos otorga la emocionalidad y el carácter, el cerebro quedaría simplemente en una maquina de cálculo
This video is amazing!!
Ahora que hagan los modelos de IA´s como los del juego Portal, el obsesionado con el espacio, el que tiene miedo, el que es inseguro, y asi, hasta crear a GLaDOS
Podemos hacer eso en "casa"? digo potenciar las neuronas por ejemplo en el modelo LLaMa. Estaría genial obsesionar a la IA con un tema o justamente ajustarla a que corrija código o cosas como esas.
Thanks!
Hola.
@DotCSV , sería posible tratar de bajarle un poco el volumen a tus vídeos? Si bien el contenido me parece muy interesante y didáctico (está muy bien estructurado, y fácil de escuchar sin aburrirse), en algunos vídeos me cuesta mucho separar tu voz de la música, y entre el marcado acento, y el volumen de la música, se me hace bastante difícil (me incomoda al poco tiempo de empezar) seguir los vídeos hasta el final de una forma cómoda.
Esto no trata ser una crítica negativa, ya que, además pienso que los temas musicales están muy bien elegidos, sino una sugerencia para mejorar incluso más el contenido de tu trabajo.
Gracias y saludos
un descubrimiento muy intetesante. Siempre hay q pensar en los malintencionados. Abre una puerta peligrosa tb. Aunq supongo q aun quedara tiempo para poder controlar modelos tipo LLM en este sentido. Pero no estoy seguro.
Espectacular trabajo el de Anthropic, y también el tuyo por divulgarlo de esta manera. ¡Gracias!
El clip del 22:12, ¿de dónde es?
Imagina tener ese control sobre las IAs mientras éstas se están entrenando. Pasaríamos de entrenar modelos de lenguaje durante meses a tener una IA que ofrezca resultados sobresalientes en minutos
Este canal debería de tener millones de seguidores de lo mejor de UA-cam