WHISPER: la mejor IA para pasar voz a texto ¡Y GRATIS! [tutorial completo]
Вставка
- Опубліковано 29 вер 2024
- Comparo Whisper con VOSK y te explico cómo instalarlo en tu equipo para pasar tus vídeos a texto e integrarlo en DaVinci Resolve Studio. ✅
Pasos para instalar Whisper
1. Instala FFmpeg y GIT
2. Instala Python en una versión menor a la 3.11 con las variables de entorno y PIP
3. Instala Whisper desde aquí: github.com/ope... o usando el comando pip install git+github.com/ope...
Habilita CUDA para vitaminar Whisper 👉github.com/ope...
Mis scripts 👉github.com/cre...
APRENDE a hacer vídeos como este con el curso de DAVINCI RESOLVE 👉👉 bit.ly/2UTtalo
🔴 Suscríbete y aprende más sobre vídeo y software creativo: goo.gl/PB79UN
🛒 El EQUIPO de Creatubers // Hazte con las mejores herramientas para tu proyecto creativo y me ayudarás con una pequeña comisión de afiliado 👉bit.ly/37TM8Q2 NO pagarás de más, sino que los proveedores dejarán de recibir una pequeña parte para dársela a Creatubers 😊
📹 Cámara: Panasonic Lumix GH5 amzn.to/3fMxn8a
👓 Objetivo: Panasonic Lumix 25mm f1.7: amzn.to/2BguKXc
🎙 Micrófono: Audio Technica AT2020 amzn.to/2RriqL7
⏺ Interfaz de sonido: Behringer UM2 U-Phoria amzn.to/2HivO2w
💡 Iluminación: antorchas LED Yongnuo YN160 III amzn.to/2ppjFhF
#whisper
Me ha servido más o menos, los pasos a seguir son bastante superficiales para gente que hemos abierto cuatro veces la consola de comandos. He tenido que completar con otros tutoriales. Te recomiendo más claridad a pesar de que el vídeo pierda dinamismo. De todas formas, gracias por estar ahí.
No se te ha ocurrido que de casualidad hay gente que no tiene 10 años programando como tu cuando haces los tutoriales?
Hola Creatubers, la verdad es muy difícil, y llevo 2 horas buscando el archivo .py de Whisher, y nada que lo encuentro, me puedes ayudar, y no si se hacer esto mas sencillo... Ya me duele la cabeza. Gracias por la info.
No uso ni el dictado de voz de google y voy a usar el de un desconocido.
Un desconocido que es el dueño de Twitter, lanza cohetes al espacio que luego aterrizan de pie, fabrica coches que conducen solos y es (o era hasta ahora) el hombre más rico del mundo. 😄
genial, pero si funciona con davinci resolve gratis ? no la versión studio
No, solo la versión Studio permite ejecutar scripts externos.
Buenos días. He aplicado todo lo que señala para extraer subtítulos mediante Whisper. La transcripción es excelente, pero lamentablemente no pasa de extraer las 10 primeras líneas. Mi PC es un dell muy potente. No sé dónde está el error.
Una prueba clave para todo sistema de inteligencia artificial que pase voz a texto es la coma del vocativo: si incluye la coma en un mensaje como «Hola holita, Pedro», merece todos mis respetos 😛
Yo pensé que la prueba clave era entenderle a un chileno 🧐🤣
@@hugobracamontesbaltazar jaja😇😃
Perdón, no lo terminé de ver. Bastante complejo desde el principio. Gracias por tu esfuerzo.
*solo me falta la RTX 3090 ti y algunos componentes, creo que cuando llegue a los 495 años de edad podre comprarlos y morire feliz.* 💻🖥⌨🖨🖲🎙🎧📱
¡Más optimismo! Ya están saliendo las GPU de AMD, así que Nvidia está empezando a bajar precios. 😉
Buenas Pedro , sabias si habría una manera de editar el Script para que haga los subtítulos letra por letra y en vez de en capas de subtitulos , en una linea de tiempo que tenga Texto normal?
4:32 demasiados sponsors amigo, pasando además para hacer esto es demasiado complicado muchísimos pasos y no se si se podrá hacer todos esos pasos en MacOS
Nada pasando del tema, yo quiero coger un MP3 de cualquier cantante y que la aplicación/pagina web de forma GRATUITA me la traslade a otra voz como por ejemplo Fofo/Gaby/Nino Bravo entre otros (DEP todos ellos obviamente)
¡ES enserio!!!??? Todo eso hay que hacer para usar Whisper!!!??? Yo ya me perdí. Es un despelote. No tengo ni idea como hacer eso que explicás, aún explicándolo tan bien como lo hacés vos, es imposible seguirte, porque no entiendo lo que explicás. Yo... paso, Whisper no es para mí. Además no me gusta instalar más cosas para poder instalar y usar Whisper. Realmente me parece un disparate!
Y todavía no hay ninguna decente para convertir texto a voz?
Sí que la hay, pero por las mejores por ahora son de pago. Google tiene Text-to-Speech, que es buenísimo.
Eso de tutorial completo es debatible.
hola, que tal, tengo una duda, es posible hacer lo mismo pero en jupyter (como si se hiciera en colab), la verdad logro hacer correr whisper en jupyter pero en forma directa, es decir, me transcribe solamente, no me crea los archivos .str con los tiempos (subtitulos como tal) y todo eso (como cuando uno lo hace en colab). ni tampoco como lo haces por video con powershell.
desde ya muchas gracias.
Uf, sinceramente no sabría decirte, porque no tengo experiencia con Jupyter. A ver si alguien puede echarte una mano.
¿Y los que tiene tarjetas gráficas AMD? es que nadie lo explica en ningún video.
Pedroooo, una pregunta, hay forma de poner los subtítulos para que en cada línea vaya solo una palabra?
Buena pregunta. Lo miraré, porque estaría bien para adaptarlo vídeos verticales.
@@Creatubers Exacto, es precisamente para eso. Lo he intentado con subtitle edit pero no he podido 😅
Filmora pro, ya hace esto en un click
Y DaVinci Resolve y Subtitle Edit (más info en mi último vídeo).
Excelente video, faltan algunos pequeños detalles como por ejemplo: com instalar Whisper desde Gibhub, ya que algunos como yo no tenemos la minima idea de usar Gibhut y en mi caso me cuesta entender la descripcion que ahi explican; ahora ando buscando un tutorial de como instalar paquetes desde Gibhut.
Hola bro, estoy en la misma, encontraste algo?
No se usar Visual Studio Code... Ayuda, por favor!
hola pedro,,, muchisimas gracias por el video,,, podrias hacer un video paso a paso para la instalacion de whisper en w10 e integrarlo a davinci,,, para mi estos temas son nuevos,,, y no los conocia,,,, vi el link de hithub,,, pero no he podido saber como se hace,,,,, muchas gracias ,, y muchas bendiciones,,, Dios le pague
¿Has seguido los pasos del vídeo? Está todo tanto ahí como en el Github (y recuerda que necesitas DaVinci Resolve Studio).
@@Creatubers si,,,,muchas gracias,,, leyendo con atención,,, se va resolviendo,,, muchas grcias Pedro
La diferencia de tiempos es grande, pero la pregunta sería: en el primer round, sin la GPU en Whisper, VOSK lo ha hecho con la CPU también? Si es así, yo diría que VOSK es más eficiente.
Sí, Vosk por defecto usa la CPU y es más rápido con un modelo de tamaño similar, pero el resultado de Whisper está a años luz.
@@Creatubers pero usa mucho recurso ese es el detalle
Pero cómo se instala whisper!!!
no diste el enlace para. descargar gilt (para Mac)
¿Puedo transcribir una conferencia de 1:30 hrs?
Ctrl+Mayus+F Panel sistente en subtile edit 7:24
que bueno, gracias
Hola, queria saber que limitaciones tiene. Me gustarían desgrabar unas cuantas clases, por lo tanto es mucho texto jajaja. Tendre algun problema en ello? Gracias
para entorno de escritorio windows se podra?
quiero usar la voz de mickey mouse para mis videos gracias por el video
bueno esperemos una verion online
se tiene que actualizar?
Friolera de 6 minutos jaja
a mi no me funccion tu script en davinci
FUNCIONA PERFECTO en Mac 👍👍
No entendi que habre hecho mal (tambien uso Mac) porque cuando desde DR Studio ejecuto el script no hace nada...
Por favor, una guía rápida de como lo has hecho 🙂
Hola Pedro!!! Sequi todos los pasos de video, pero cuando aranco archivo whisperpowershell, se abre ventana de powershell y en unos segundos se cierra, no puedo acer andar. Me pueden decir donde tengo error. En DAVINCHI FUNCIONA CORRECTO, GRACIAS.
Tienes que colocar el script en la carpeta donde esté el vídeo, en el formato de vídeo que marca (cámbialo dentro del script con el Notepad si tus vídeos están en otro formato). Si sigues teniendo problemas, botón derecho en un área vacía dentro del directorio donde esté el script > Abrir en Terminal. Desde aquí escribe el nombre del script y le das a ejecutar. Este método sirve para que, si te da error, no se salga de la ventana y te muestre el error que se ha producido y puedas corregirlo.
@@Creatubers Muchas GRACIAS!!! Voy a probar
¿Aun funciona?
Hola Pedro!!! Me encanta que nos das estos tips técnicos que van más allá de la utilización de un software..., voy a trabajar con esto y otros videos que has puesto para subtitular algunos videos....
Por cierto..., ¿Como harías para trabajar los subtitulos en Davinci, de tal forma que estén disponibles en varios idiomas, por ejemplo en inglés, francés, español, etc.? ¿Se puede desde Davinci con los plugins que nos has mostrado? Porque también habría que hacer la traducción, que yo me apoyo en Subtitle Edit para hacerlo, y luego solo afino...
Saludos y super tu contenido!!! 👍👏😉
Para añadir subtítulos en varios idiomas yo lo haría directamente desde Whisper en el modo traducción del vídeo ya exportado (lo que comento al final del vídeo) con la opción de traducción automática que ofrece (parámetro "--task translate", más info en su Github). Luego los ajustas desde Subtitle Edit y ya los tienes.
@@Creatubers Muchas gracias Pedro!!! voy a revisarlo así..., 👌👍😀
Hola Pedro! estoy usando whisper en un codigo python desde mi ordenador con la CPU, quisiera usarlo desde GPU pero no se como especificarlo en el codigo python. Si puedes ayudarme... Gracias!
¿Tienes GPU de Nvidia relativamente reciente? En el enlace que puse en la descripción te dice cómo hacerlo: github.com/openai/whisper/discussions/47
Yo lo que tuve que hacer fue desinstalar Torch con PIP y reinstalarlo con los comandos que muestran:
pip uninstall torch
pip cache purge
pip3 install torch torchvision torchaudio --extra-index-url download.pytorch.org/whl/cu116
Gracias! Tengo una 3050.. lo logre pero tuve un problema q al parecer no tiene sificientes cudas para lo q quería hacer. Asi q volvi a trabajar desde la CPU. Lento pero seguro 💪
Mejor que Vosk?
Has uno con colab
no le entendi nada
Muy buen vídeo, muy bien explicado, fácil, sencillo y para toda la familiañ
Sigue así Pedro.
¡Gracias!
muchas,,, pero muchas gracias por el video,,, excelente explicación,,,,,
muy pero muy bueno,,,mi amigo,,,,, si me sirvío,,, 👍👍👏👏
el que pueda comprar el programa que lo compre y apoye al autor,,, eso esta muy bien 😁😁😁
me divirtió bastante su explicación,, usted es un cacao para los videos,,,
que ojala tambien asi sea ,,, tambien muy bueno para las cosas celestiales,,
osea,,, para las cosas del Dios Altísimo,,,
Que el Señor Jesús te bendiga y te cubra con su Sangre Preciosa trabajo y familia🙏🙏🙏
Que la Sangre Del Cordero De Dios, Nos Sane, Nos Limpie, Nos Purifique Y nos Haga Santos,,, 😇😇😇
que el Señor Jesús nos conceda la gracia de ser sus amantes,, los Amantes del Amor🩸🩸🩸
Sangre Preciosa de Jesucristo sálvanos a nosotros y al mundo entero
LA META ES EL GRAN SELLO DE LA PRECIOSA SANGRE PRECIOSA, LA MARCA DE PERTENENCIA.,,,,,
esto es, el Tabernáculo Vivo en el alma de los hombres,,,,,
que Dios desea formar en todas las almas.,,,,,,,,
el Tabernáculo Vivo de Dios en el alma de los hombres
es el Reino Glorioso que ustedes están esperando.
Santa Cecilia Patrona de la Preciosa Sangre 14 jul 2002
que el Gran Día estemos preparados,,,,,
revelacionesmarianas.com/aviso.html
Brutal!
Me perdi de nuevo el directo... pta madre!! Muy buen video messi..rrrveeee!!🤣🇦🇷
Hola, soy un canal muy pequeñito que acaba de empezar con el tema del stop motion con LEGOS. Mi inglés no es como para tirar cohetes y me gustaría saber si esto serviría para traducir del español al inglés y poner subtítulos a los vídeos. Otra pregunta es para hacer FX realmente merece la pena Davinci, ya que la parte de efectos creo que es de pago. Gracias y buen trabajo.
No se si sirva para traducir, sin embargo, vas a obtener la transcripción en inglés en altísima calidad. Lo que puedes hacer para traducir es usar GPT-3 que según he visto, tiene mejores resultados que un traductor convencional.
@@JhonaVega Gracias amigo. Lo miraré.
Por cierto... ¿sabes si hay una tecnología inversa, también de IA?. Me refiero a pasar de texto a voz, que no parezca un robot
Para eso necesitas un motor de síntesis de voz. Google tiene algunos que funcionan muy bien. Busca "Google text to speech". Investigaré si hay buenas alternativas open source. 👍
@@Creatubers ¡Ostras!. Muchísimas gracias, Pedro. Qué majete eres 🙂
ME DUERMO
perfecto contenido máster!
Whisper en mi PC :)
no me sale para habilitar la ejecución de scrips
No estás en DaVinci Resolve Studio.
@@Creatubers 🤣🤣🤣 hice todo y no me va a servir
Hola, Nuevo seguidor y muy interesante tu video me hace mucha falta esto ya que necesito transcribir y traducir muchos videos que estan en ingles a español con subtitulos pero al no tener mucha experiencia en el tema de programacion y demas me esta costando, descargue chocolatey y los complementos FF y git tambien la version correcta de python pero no se como poner en marchas todo para probar con un video. tendrias un video especificando mas esa parte o detallar mas los pasos de este video.
Saludos y gracias de antemano.
Hola, está super interesante. ¿Hay alguna IA que haga esto a la inversa? Tipo Dalia de Azure Microsoft
Lovo AI
Conoces alguna forma de aplicar esto a un video o audio en vivo? tener el texto de ese video o audio, seria posible como por ejemplo radio o tv, algo así? Saludos
¿Hablas de un vídeo en vivo emitido por ti o de un streaming que estés viendo? Si es emitido por ti, en UA-cam ya tienes los subtítulos automáticos. Si no, en Android tienes los live captions y en Windows ya han empezado también a poner subtítulos automáticos, aunque por ahora en inglés. Si quieres usar Whisper vas a necesitar una GPU muuuy potente para conseguirlo en tiempo real. Por lo demás, todo está en su GitHub, si sabes programación podrás crear tu propio sistema de speech to text en directo. :)
@@Creatubers Venía por esta misma pregunta! a pesar de haber servicios de suntítulos automáticos, es interesante jugar en la generación de subs en vivo, sin necesidad de depender de la plataforma. Gracias por el video! estuvo muy bien explicado :)
yo no consigo transcribir. se cierra el powershell cuando le doy Z para que lo ejecute una vez
me pasa lo mismo pudiste solucionarlo? mil gracias!
Genial, como siempre Pedro. Una pregunta... ¿lo de la eliminación de ruido de la cascada, en qué vídeo lo tratas?. Me interesa mucho, porque a veces grabo pequeñas cosas y se escucha a la niña de mi vecina llorando, por ejemplo, etc.
Mil gracias
Justo en el anterior vídeo.
Lo probé hace unos días, desde la nube siguiendo los pasos del tutorial y me sorprendió. No sabía que se podía instalarlo a la compu. Mí proceso era pasar el audio del vídeo a MP3. Subirlo a la nube y correr el script. Generaba el srt y lo bajaba y demasiado bien. Habían palabras que no las tomo pero pocas. Pase como 10 videos de 15 a 20 minutos. Era un laburo más artesanal sin automatismo, previo a la carga y ejecución de la inteligencia artificial en la nube.
Consulta el de limpiar el audio está en vídeo? El de Nvidia no está para la placa de video que tengo.
Muchas gracias. Voy a ver si puedo instalarlo y hacerlo correr localmente (que sería genial).
¡Vale! Ya nos contarás. Recuerda que con la CPU es muy probable que vaya muy lento, pero aun así creo que sigue mereciendo la pena. 😀
No funciona en Mac, ni con Whisper ni con la otro versión utilizando Vosk. De hecho corre el script pero no me genera el texto o el archivo final con los subtitulos que tengo que arrastrar a Davinci. Será que pudieras hacer un tutorial pero con MAC
Estaría increíble que hablaras acerca de la actualización de Affinity 2.0. Saludos Pedro!
¡Muy pronto!
Pedro es us muy interesante pero un poco confuso para los benigers que no tenemos mucho conocimiento en Informatica saludos de Chicago
Si tengo 1 video que trae los subtitulos incrustados (no SRT, no SSA, si no pegados en el video ) hay alguna app, programa que permita crear los subtitulos o al menos sacar el texto para despues yo traducirlos?
El script de Davinci no me sale en workspace, he puesto las variables de entorno y el script en la carpeta de utility
Genial Pedro, existe la posibilidad de generar los subtitulos en otro idioma? Como por ejemplo de Español - Ingles? Muchas Gracias por la información.
Sí, en el GitHub de Whisper explican cómo traducir los subtítulos mientras los genera. 😲
@@Creatubers la verdad que me vendría excelente como instalarlos con líneas de comandos y todo. Porque lo que tenemos 0 idea la verdad es que me esta constando muchísimo instalarlo. Y la verdad es una herramienta que es super útil en esta época. Muchas Gracias.
Existe alguna IA que escriba la letra de una cancion que no esta en internet? Conozco muchas canciones que no tienen su letra en internet y me gustaria saber que dicen jaja
Una duda, entonces de momento solo transcribe archivos de audio, pero aun no transcribe el audio en tiempo real, verdad?
me marie
es solo para la vercion de paga lolaso
Brutal
👍
como encuentro el texto generado? todo instalado y ejecutado con power shell pero no veo el resultado... gracias por el video!
Llevo visto medio vídeo sin darme cuenta que estoy buscando de texto a voz y esto es de voz a texto. Estoy apijotao.
ME gustaria saber si hay una aplicacion contraria de texto a Voz, hay varia pero me piden tarjeta de credito para completar la inscripcion.
Para mac es posible? existe una necesidad de tener una maquinas muy potente o vale con algo más basico?
hola! existe la posibilidad de traducir videos de ingles a español? o tienes algún video sobre ese tema? saludos!
sigo los pasos con la version que recomiendas, y si bien se descarga el modelo, en la cacilla donde se selecciona no apárece ninguno
👌🏻👌🏻👌🏻
Alguien sabe como puedo modificar los caracteres que me escriba por linea? por si haces un video en vertical, que no cabe todo lo que te escribe por linea
ME PERDIIII paso 3
Y cabe la posibilidad de hacerlo al revés? Texto a voz?
Hola, se puede instalar en Adobe Premiere pro ??
Whisper se puede usar con un traductor?
Gracias por este tutorial me sirvio muchisimo, esta teniendo problemas con la instalacion antes y siguiendo cada paso funciono. Lo unico que me cuesta es correr el script para que sea mas automatico
¿Funciona en la versión gratuita de Davinci o solo soporta en la versión Studio?
Cuales son los requerimientos minimos de una pc para instalar whisper
Terrible el tuto, se salta muchas cosas
¿Qué me he saltado?
@@Creatubers Porfa haz video como se usa Visual Studio Code
Sería genial si hicieras un tutorial instalandolo para Subtitle Edit.
y de texto a una buena voz???
Que video tan genial, sabes si se puede usar para pasar de voz a texto un youtube live?
¡Perfecto! Es infinitamente más lento que Vosk (no tengo gráficos dedicados y la CPU no admite FP16) pero el resultado es espectacular. Puntuación (incluidos puntos suspensivos), marcas y modelos de coches, nombre de poblaciones... Todo con sus mayúsculas y ajustado al milímetro. Sólo ha fallado en una localidad a la que ha añadido una H por su cuenta y riesgo. No conseguí hacer funcionar la integración con VOSK en DRS18, pero WHISPER me ha funcionado a la primera. ¡Una maravilla! Felicitaciones por tu trabajo y muchas gracias.
A mi me demora un monton, mas de una hora en traducir. Tengo una placa de video UHD Intel Graphics 630, que viene ya integrada con la placa madre. Y a mi también me salta ese mensaje que dice que no es compatible con FP16. Como puedo hacer para acelerar el proceso y que utilice aunque sea esa GPU..? Me podrías dar una mano? No entiendo mucho de programación, e intenté muchas cosas.
Utilicé Google Colab, pero después de un tiempo me dice que no puedo usar la aplicación porque es la versión gratuita. Si quiero usar la GPU tengo que comprar la versión Pro. Y ahora estoy jodido.
no es gratis
Por supuesto que lo es. Cualquiera puede acudir a su Github y descargarlo sin coste alguno: github.com/openai/whisper
@@Creatubers TRATE DE USARLO PERO NO ME DA MAS QUE UNOS MINUTOS Y DESPUES ES DE PAGO
Tambien puede comparar con la transcripcon de de Premiere no sé que metodo usa pero es bastante rápido y bueno
Hola Pedro, como estás? sabes que ya lo había instalado con anterioridad y funcionaba, yo utilizaba mucho tu script "powerwhisper" y ahora en windows 11 no me funciona. Coloco ejecutar con powershell y se abre el powershell y se cierre inmediatamente, qué será ? gracias
hola, pudiste solucionarlo?
@@bozalito28 sabes que no, y medio que dejé todo así por que la nueva versión de Da Vinci en Beta la 18.5 incorporó el tema de la subtitulación, pero me gustaría tener de igual forma el Whisper.
@@juanmacastro90 ya pude solucionarlo, sucede que como el scrip no esta firmado se cierra, tienes que habilitar que se ejecuten los scrips no firmados y listo :)
@@bozalito28 que genial! te agradezco un montón. Voy a googlear como hacerlo, si no te escribo otro mensaje. Aguante el chat de YT de canales lindos como Creatubers jaja
"nerd alert" jaja
Lo voy a probar 😌
Hay una manera de que el audio ingles sea traducido al espanol?
Busco la misma solución, seria genial tener un audio en ingles y que te pase los subtítulos traducidos al español
Excelente video y aporte
¿Pedro debo usarlo solo con Davinci Resolve?
Yo estoy aprendiendo a utilizar Kdenlive porque es gratis, se puede utilizar en equipo no sofisticado.
Yo no me dedicaré a esto, pero si quiero que las clases que subo a UA-cam o a LinkedIn estén subtitulados. Saludos!
KDEnlive tiene también integración con Vosk (y ya funcionando de serie) y me consta que puedes ejecutarlo en máquinas muy modestas. Si además estás en Windows y quieres usar Whisper aparte, puedes subtitular el vídeo directamente, usando el script que menciono al final. :)
@@Creatubers ¡Excelente! Si tu lo dices, es correcto! Yo estoy aprendiendo en un canal we UA-cam.
Lástima que tú no eres el instructor. Son 22 clases. Seguiré buscando otra opcion
Mientras es el único que he encontrado que abarca toda la aplicación.
Se me ocurrió verlo en una pantalla adicional y en mi laptop, todo se ve en pequeño se escucha poco y habla despacio. Es tan difícil que el video dura 6 minutos y tardo 45 minutos en entender, ubicar el botón, etc.
Ahora que se me ocurrió ver en dos pantallas quizás termine más rápido las 22 clases.
Nunca había editado ni audio ni vídeo. Me emociona mucho aprender, al ver tus videos y tus efectos, claro esa es tu profesión y tu experiencia. No creo llegar a ese nivel. Al menos que mis clases tengan efectos chulos. Además pienso llegar a crear cursos online.
Pedro, gracias y saludos de Guatemala.
deberias hacer uno explicado mejor: puntos a los que mejorar
muestra toda la descarga de FFmpeg y GIT
explica como descargar y usar visual studio y todo mejor explicado.
Si haces eso vas a llegar a mas gente que no esta metido en esto
Esta muy mal explicado. No le cuesta nada especificar, llevo 2 horas tratando de entender que carajo hizo porque no especifica donde poner los comandos.
se puede hacer online? porque mi gpu y me cpu son básicas.