無程式碼也能輕鬆打造專業LINE官方帳號！一鍵導入模板，讓AI助你行銷加分！
Linly-Talker es un sistema conversacional de avatar digital de código abierto desarrollado por el equipo Kedreamix. Integra todo el pipeline de IA conversacional en un sistema único y configurable.
Repositorio: github.com/Kedreamix/Linly-Talker
Stack Tecnológico
flowchart LR
A[Entrada de Usuario\nVoz o Texto] --> B[Módulo ASR\nWhisper / SenseVoice]
B --> C[Núcleo LLM\nGPT / Qwen / Linly]
C --> D[Motor TTS\nCosyVoice / Edge-TTS]
D --> E[Cabeza Parlante\nSadTalker / Wav2Lip]
E --> F[Salida de Avatar\nVideo con Audio]| Etapa del Pipeline | Opciones Tecnológicas | Rol |
|---|---|---|
| Reconocimiento de Voz (ASR) | Whisper, SenseVoice, FunASR | Convierte voz a texto |
| Modelo de Lenguaje (LLM) | GPT-4, Qwen, Linly, ChatGLM, DeepSeek | Genera respuesta conversacional |
| Texto a Voz (TTS) | CosyVoice, Edge-TTS, GPT-SoVITS | Convierte texto a voz |
| Cabeza Parlante | SadTalker, Wav2Lip, MuseTalk, LivePortrait | Genera video de avatar sincronizado |
Generación de Cabeza Parlante
| Característica | SadTalker | Wav2Lip | LivePortrait |
|---|---|---|---|
| Precisión de sincronización labial | Alta | Muy Alta | Alta |
| Movimiento de cabeza | Natural | Mínimo | Expresivo |
| Transferencia de expresión | Moderada | Ninguna | Fuerte |
| Tiempo real | Sí (con GPU) | Sí | Sí |
| Entrada de una imagen | Sí | Sí | Sí |
Hardware
| Componente | Mínimo | Recomendado |
|---|---|---|
| GPU | NVIDIA GTX 1660 (6GB) | NVIDIA RTX 4060 / A4000 |
| RAM | 16 GB | 32 GB |
| Almacenamiento | 20 GB libres | 50 GB libres |
Aplicaciones
- Quioscos de servicio al cliente
- Tutores educativos
- Asistentes virtuales
- Creación de contenido
- Herramientas de accesibilidad
FAQ
Qué es Linly-Talker? Sistema de avatar digital conversacional de código abierto que combina LLMs con modelos de generación visual.
Stack tecnológico? ASR (Whisper), LLM (GPT/Qwen/Linly), TTS (CosyVoice), cabeza parlante (SadTalker/Wav2Lip).
Clonación de voz? Sí, con 10-30 segundos de muestra de audio.
Tiempo real? Casi en tiempo real con RTX 3060+.
Licencia? MIT.
