Subs AI - Generación automática de subtítulos para videos con OpenAI Whisper

 (github.com/abdeladim-s)
29 puntos por xguru 2023-08-17 | 5 comentarios | Compartir por WhatsApp
  • Generador automático de subtítulos que funciona completamente sin conexión
  • Linux/Mac/Windows
  • Compatible con varias implementaciones de Whisper: whisper-timestamped, whisper.cpp, faster-whisper, whisperX
  • Función de edición de subtítulos
  • Ofrece función de traducción usando dl-translate (modelo M2M de Facebook)
  • Web-UI + CLI + paquete de Python
  • Procesamiento por lotes mediante CLI, y posibilidad de desarrollar tus propios scripts con el paquete de Python
  • Compatible con formatos de subtítulos como SubRip (SRT), WebVTT, MicroDVD, MPL2, TMP, entre otros

Lecturas relacionadas

5 comentarios

 
markmc 2023-08-18

También hay una app para Mac con funciones similares. Puede capturar la salida de audio de la Mac para convertirla en texto y traducirla conectando las API de Google Translate/DeepL.
https://apps.apple.com/us/app/id6450404233
 
xguru 2023-08-18

Yo también probé WhisperMate y se veía bastante limpio. En Mac, esto parece ser una buena opción.
Ojalá que para Windows también salga así de limpio
 
botplaysdice 2023-08-18

¿Cómo se generan los captions automáticos que ofrece YouTube? Whisper es realmente impresionante. Una de las cosas que más sorprenden de la app de ChatGPT, además de las respuestas de ChatGPT, es que la entrada por reconocimiento de voz es realmente increíble. Cada vez que la uso, me sorprende...
 
jujumilk3 2023-08-17

Si usas esto junto con DeepL, que también salió hoy, da miedo.
 
xguru 2023-08-17

Lo probé ejecutándolo con Docker en Windows y funciona bien.
También puedes ir cambiando entre modelos para probar el reconocimiento, y además genera bien los subtítulos.
Con el inglés funciona de maravilla, pero con el coreano sí tiene algunos errores.
El rendimiento de traducción no es muy bueno, así que parece mejor generarlo en inglés y usar otro traductor.