VideoReTalking
OpenTalker/video-retalkingRevisado por IA
Revisado por RepoPicks Radar el
¿Qué es VideoReTalking?
VideoReTalking toma un video existente de una persona hablando y retrabaja el rostro para que la boca coincida con una pista de audio diferente, con la opción de cambiar la expresión (neutral, sonrisa, sorpresa, enojo). Viene de un artículo de SIGGRAPH Asia 2022 de la Universidad de Xidian, Tencent AI Lab y la Universidad de Tsinghua. Para ejecutarlo configuras Python 3.8 y una tarjeta NVIDIA con CUDA 11.1, instalas ffmpeg, descargas los archivos del modelo desde una carpeta de Google Drive y ejecutas un comando. También hay un notebook de Colab y una página de pago operada por otras personas.
VideoReTalking es gratis y de código abierto (Apache-2.0) y puede reemplazar a HeyGen, D-ID y Rask AI.
¿Qué tan fácil es instalar VideoReTalking?
B · instalador y un paso simple · Web
- Windows D
- Linux D
- Web B
La forma más suave de entrar es la web, con calificación B: el README ofrece un notebook de Colab (quick_demo.ipynb) y una página de Replicate, donde abres la página y presionas ejecutar en lugar de instalar algo. Instalarlo tú mismo es D en Linux y Windows: `conda create -n video_retalking python=3.8`, `conda install ffmpeg`, luego una línea de PyTorch específica para la tarjeta gráfica que el propio README limita ("This installation command only works on CUDA 11.1"), `pip install -r requirements.txt`, y una descarga manual de los modelos preentrenados en `./checkpoints` antes de que `python3 inference.py` funcione.
VideoReTalking en GitHub
- Estrellas
- 7300el 10 nov 2026
- Descargas
- 461.156945 en la semana
- Crecimiento
- +1estrellas en 6 días
Estrellas a lo largo del tiempo
Datos
- Funciona en
- Windows, Linux, Web
- Necesitas instalar
- Python, Tarjeta NVIDIA, FFmpeg
- Para compilar desde el código
- Python, FFmpeg
- Espacio en disco
- 100 MB–300 MB · estimación
- Cuentas o claves
- Ninguna
- Costo
- Gratis · El código es gratuito bajo Apache-2.0. El README también enlaza a una página de Replicate operada por otra persona (cjwbw/video-retalking); servicios así cobran por el tiempo de máquina, algo que el README no explica.
- Licencia
- Apache-2.0 (Permisiva)
- Último cambio en GitHub
- 4 nov 2023
Señales de riesgo de VideoReTalking (9)
- Atenciónversiones desactualizadas
Última versión el 2023-03-15 (hace 1334 días)
revisión automática
- AtenciónEnlaces de descarga a sitios de archivos
El README enlaza a https://drive.google.com/drive/folders/18rhjMpxK8LVVxf7PI6XwOidt8Vouv_H0?usp=share_link
revisión automática
- AtenciónDependencias con vulnerabilidades conocidas
Dependencias fijadas con vulnerabilidades conocidas (OSV): basicsr: GHSA-86w8-vhw6-q9qq, PYSEC-2026-1215
revisión automática
- Atenciónhace que una persona real parezca decir otras palabras
README: "a new system to edit the faces of a real-world talking head video according to input audio, producing a high-quality and lip-syncing output video even with a different emotion", con una "face enhancement network" para "improve the photo-realism". El propio Disclaimer del proyecto prohíbe "fraud, deception, infringement of others' portrait rights, reputation rights", pero nada en el código verifica quién aparece en el video ni marca el resultado.
revisión con IA
- Atenciónlos archivos del modelo vienen de un google drive compartido
README Pretrained Models: "Please download our pre-trained models and put them in `./checkpoints`", señalando a una carpeta de Google Drive (drive.google.com/drive/folders/18rhjMpxK8LVVxf7PI6XwOidt8Vouv_H0). Nada funciona sin esos archivos, la carpeta está fuera de GitHub, y no se da ningún tamaño, suma de verificación ni firma para ellos.
revisión con IA
- Atencióncódigo congelado en una pila de software antigua
El último cambio es del 2023-11-04 (1100 días antes de esta revisión) y las instrucciones fijan Python 3.8, `torch==1.9.0+cu111` y `dlib==19.24.0`, con 215 issues abiertos frente a 7298 estrellas. Esas versiones son de 2021, así que un controlador gráfico o Python actuales pueden no aceptarlas y nadie ha actualizado la receta.
revisión con IA
- Infono es un producto oficial de tencent
Disclaimer: "This is not an official product of Tencent", y el punto 5 agrega que "This open-source code does not have the ability to directly provide services to end-users". Varios autores aparecen listados en Tencent AI Lab, pero el repositorio es código de investigación, no un producto con soporte.
revisión con IA
- Infoconstruido sobre otros seis proyectos de investigación
Hay una carpeta `third_part/` y el Acknowledgement agradece a Wav2Lip, PIRenderer, GFP-GAN, GPEN, ganimation_replicate y STIT "for sharing their code". Esas piezas tienen sus propias licencias y condiciones, que el archivo Apache-2.0 de este repositorio no cubre.
revisión con IA
- Infolímites señalados por los autores
README: "You can test any talking face videos without manual alignment. But it is worth noting that DNet cannot handle extreme poses." Las cifras de calidad en el teaser provienen del propio artículo de los autores (arXiv:2211.14758).
revisión con IA
La evidencia aparece en su idioma original.
Lo que Radar no pudo verificar de VideoReTalking
- Si la receta todavía se instala hoy, dado que las versiones fijadas de CUDA 11.1 y Python 3.8 y tres años sin cambios
- Qué hay exactamente dentro de los checkpoints de Google Drive, ya que no se publica ninguna suma de verificación ni lista de archivos
- El uso real de disco, ya que los chequeos estiman entre 100 y 300 MB a partir de una heurística y los archivos del modelo no se cuentan
- Cuánto tarda un video en tu tarjeta gráfica, algo que el README nunca indica
- Qué tan convincente se ve el resultado en tus propias grabaciones, especialmente con vistas laterales o movimiento rápido