La compañía xAI ha puesto a disposición del público Grok Voice Transcribe 2.0, su más reciente sistema de reconocimiento de voz. Según la empresa, esta versión duplica la precisión alcanzada por su antecesora. La herramienta está diseñada para transformar conversaciones y grabaciones de audio en texto y ya se puede emplear a través de la API de reconocimiento de voz de xAI.
El costo se mantiene sin cambios: 0,10 dólares por hora de audio para transcripciones por lotes y 0,20 dólares por hora para procesamiento en tiempo real. xAI también ha informado que próximamente esta versión será la opción predeterminada de su API, mientras que Grok Voice Transcribe 1.0 será retirado en las próximas semanas.
Entrenamiento para entornos reales
Grok Voice Transcribe 2.0 se fundamenta en el modelo de audio que xAI utiliza para su asistente Grok Voice. La compañía asegura que esta tecnología ya procesa decenas de miles de llamadas de atención al cliente cada día, transcribe millones de horas de narraciones de vídeo y permite ejecutar agentes de voz en productos físicos, incluido el asistente Grok integrado en vehículos Tesla.
Para desarrollar la nueva versión, xAI empleó grabaciones de audio en directo con ruido de fondo y en diversos idiomas y entornos. Luego aplicó procesos de postentrenamiento para mejorar el comportamiento del modelo en situaciones de uso habitual.
Según la compañía, Grok Voice Transcribe 2.0 ocupa el primer puesto en precisión entre 32 modelos de transmisión analizados en la clasificación pública de Artificial Analysis. En pruebas internas, xAI también comparó el sistema con modelos como Gemini 3.5 Transcribe, MAI-Transcribe-2, ElevenLabs Scribe v2, Deepgram Nova-3 y Whisper Large v3.
Las pruebas internas incluyeron cuatro tipos de audio: llamadas de atención al cliente, conversaciones con Grok, información hablada como códigos y direcciones de correo electrónico, y comandos de voz breves en distintos idiomas.
La gran mejora está en los idiomas
xAI destaca que el avance más significativo frente a Grok Voice Transcribe 1.0 se encuentra en la transcripción multilingüe. El modelo puede trabajar con decenas de idiomas, detectar automáticamente cuál se está usando y seguir una conversación donde el hablante cambia de lengua.
Esta capacidad es especialmente relevante para comandos cortos, donde hay poco contexto para identificar el idioma. En pruebas con frases breves de asistentes de voz en 19 idiomas, la tasa de error de palabras pasó del 20,6 % en la versión anterior al 6,8 % con Grok Voice Transcribe 2.0.
Funciones para desarrolladores
La API permite usar el modelo tanto para archivos de audio previamente grabados como para transcripciones en tiempo real. Entre sus funciones se incluyen marcas de tiempo y puntuaciones de confianza a nivel de palabra, identificación de diferentes hablantes y transcripción de hasta ocho canales de audio.
También incorpora un sistema para priorizar términos específicos de un sector, con hasta 100 palabras o expresiones por solicitud. El modelo puede devolver correctamente escritos números, fechas, monedas, teléfonos y direcciones de correo electrónico, además de eliminar palabras de relleno.
Para los agentes de voz, xAI incluye una función de detección de turnos que permite determinar cuándo una persona ha terminado de hablar y el sistema puede responder.
La API admite 12 formatos de audio, archivos de hasta 500 MB y diferentes frecuencias de muestreo. También ofrece parámetros para trabajar con 25 idiomas.
Loom ya usa el nuevo modelo
Una de las primeras implementaciones destacadas está en Loom, la plataforma de grabación de pantalla de Atlassian. Según xAI, Atlassian comparó Grok Voice Transcribe 2.0 con su solución anterior y determinó que el nuevo modelo ofrecía una mayor precisión.
A partir de esa evaluación, Loom comenzó a utilizar Grok Voice Transcribe 2.0 para transcribir sus vídeos. Atlassian también resalta la posibilidad de combinar estas transcripciones con herramientas de programación como Cursor para convertir instrucciones habladas en código.
El modelo ya puede seleccionarse mediante las interfaces REST y WebSocket de xAI. Durante la transición, quienes necesiten continuar utilizando la versión anterior podrán especificar manualmente grok-voice-transcribe-1. Sin embargo, xAI prevé convertir Grok Voice Transcribe 2.0 en la opción predeterminada y retirar progresivamente la primera versión.
Fuente: Infobae