Salesforce ha puesto bajo licencia abierta uno de los pilares de voz más completos que existen: SOV-Transcribe-1, un modelo de reconocimiento automático de la voz (ASR, de «automatic speech recognition») no en streaming, con pesos abiertos y licencia Apache 2.0, publicado esta semana con su ficha y su blog de lanzamiento en Hugging Face. No es una recuantización de una receta ya existente: es un modelo construido como un «lenguaje aumentado con voz», con su propio codificador de audio, su propio proyector y un gran modelo de lenguaje al final. En los días que lleva publicado ya ha generado un hilo animado en r/LocalLLaMA (lo veremos en la sección de comunidad) y una avalancha de pruebas sobre grabaciones reales.
La arquitectura es un híbrido que cuenta mucho del diseño. En el lado del audio usa el probado codificador de Whisper large-v3. En el lado del lenguaje, un MoE (de «mixture of experts», expertos mezclados) de Gemma 4 con 26.600 millones de parámetros en total, pero solo 4.600 millones activos por token (el router corre en FP32, el resto en BF16). La consecuencia es clara: el coste de cómputo por token es el de un modelo medio, mientras que la capacidad en el lado del lenguaje es la de su clase. Es justo ese combo el que permite al modelo aceptar hasta 30 minutos de audio por solicitud (probado) y tratar la transcripción como algo que se puede moldear, no solo imprimir.
Y ahí está la diferencia. En vez de una caja negra, SOV-Transcribe-1 acepta instrucciones en lenguaje natural: se le puede pedir una transcripción literal (todos los muletillas, todas las vacilaciones) o una versión limpiada en estilo escrito, y se puede controlar la puntuación, las mayúsculas y el formato de los números. A eso se suma el sesgo por contexto: antes de la llamada se le pueden pasar una lista de nombres, vocabulario técnico de un dominio o una descripción breve del tema, y el modelo los usa para acertar con las palabras difíciles —la característica que decide si una reunión con nombres propios sale usable o no—. Todo ello en siete idiomas: inglés, francés, alemán, español, italiano, portugués y neerlandés.
Los benchmarks publicados son fuertes. Artificial Analysis lo sitúa como el mejor modelo de pesos abiertos para speech-to-text no en streaming (7.º en la lista completa, que incluye sistemas propietarios), y VoiceCodeBench —de besimple AI— lo pone como el 2.º de 23 sistemas en precisión de entidades y éxito de tarea, el tipo de errores (un nombre mal escrito, un teléfono incorrecto) que no se pueden pagar en una aplicación real. El lanzamiento además anuncia una tasa de error de palabra (WER, de «word error rate») de 2,28 % en su prueba principal de inglés, un número que lo sitúa cara a cara con la mejor del campo, incluidas las API comerciales.
La vía de despliegue es la de cualquiera que ya corra vLLM: un plugin nativo para vLLM 0.32.0 viaja con el repositorio (el upstream en vLLM y Transformers está en curso), y hay además una implementación autocontenida para Transformers, con un procesador que toma el audio y el prompt. Para quien quiera velocidad, Salesforce publica en un repositorio aparte un pequeño modelo borrador, DFlash, para decodificación especulativa: el borrador propone bloques de tokens y el modelo principal los valida. En resumen: un modelo abierto con licencia, benchmarks y una vía de producción —uno de los pocos casos en que «abierto» no es un slogan sino un stack que funciona.
Las salvedades, para que queden claras: es un modelo no en streaming (un lote de archivos, no la transcripción en tiempo real de una llamada viva), y la descarga sin cuantizar en BF16 pesa —26.600 millones de parámetros en BF16 son unos 53 gigabytes en disco—. La comunidad hará lo de siempre: las cuantizaciones, los adaptadores y las primeras integraciones ya están en marcha. Pero para el caso de uso «grabé una reunión y quiero la transcripción en mis manos, en mi infraestructura», es el candidato de pesos abiertos más fuerte del mercado ahora mismo —y la primera vez que un gran laboratorio entrega la pila de voz completa (codificador, proyector, LLM, decodificación especulativa) con licencia abierta de una sola vez.