Havells incorpora control por voz multilingüe a su ecosistema de hogar conectado con ElevenLabs

Voice Mode ya está disponible para toda la base de usuarios de Havells One, una app con aproximadamente 2,7 millones de descargas, y admite ocho idiomas en siete categorías de dispositivos.

Havells es una de las principales empresas de productos eléctricos de India y ofrece una amplia gama de productos conectados, como aires acondicionados, ventiladores, purificadores de aire y agua, calentadores de agua, lavadoras e interruptores inteligentes. Para mejorar la experiencia del hogar inteligente, el Centro de Investigación e Innovación (CRI) de Havells desarrolló Agentic AI Voice Mode, una interfaz conversacional inteligente dentro de la app Havells One que permite a usuarios controlar electrodomésticos mediante interacciones de voz naturales en inglés y varios idiomas indios. Está desarrollado mediante programación sobre ElevenAPI, utilizando Voz a Texto en streaming en tiempo real (Scribe v2 Realtime) y Texto a Voz (Eleven v3 Conversational), integrados con el agente inteligente propietario de Havells para el control de dispositivos.

La experiencia de voz anterior de Havells admitía inicialmente inglés y después hindi en determinados electrodomésticos, pero seguía basándose en comandos. Usuarios tenían que recordar frases específicas y patrones de invocación para que los dispositivos respondieran correctamente. No es así como hablan de forma natural los hogares indios, donde a menudo se mezclan inglés, hindi, maratí y otros idiomas regionales en una misma conversación. Agentic AI Voice Mode invierte este planteamiento. Las personas hablan con naturalidad y el sistema comprende la intención, el contexto y el idioma.

La latencia y la naturalidad fueron decisivas en la evaluación

Havells evaluó varias plataformas de voz IA según la precisión del reconocimiento de idiomas, la compatibilidad multilingüe, la latencia y la síntesis de voz. El equipo descubrió ElevenLabs mientras investigaba proveedores de Texto a Voz en streaming de alta calidad y baja latencia, e incluyó ElevenLabs entre las finalistas por su precisión, velocidad y compatibilidad multilingüe, además de por la documentación de la API, el panel de control, el soporte y las voces de muestra en idiomas indios.

En las pruebas comparativas, la diferencia se hizo evidente en la rapidez y naturalidad con la que respondía el asistente. Para un asistente de hogar inteligente, la latencia no es solo una métrica técnica. Una respuesta tardía se percibe como una interfaz de voz tradicional, mientras que una rápida se siente como una conversación en tiempo real. La naturalidad y la capacidad de respuesta en tiempo real eran lo más importante para Havells, y ambas determinaron la decisión de crear Voice Mode con ElevenLabs.

Ocho idiomas que se ajustan a cómo hablan realmente los hogares indios

Voice Mode admite inglés y siete idiomas indios: hindi, tamil, telugu, bengalí, canarés, guyaratí y malayalam. Usuarios controlan dispositivos por electrodoméstico, habitación o escena, utilizando lenguaje natural en lugar de un conjunto fijo de comandos.

El asistente interpreta el habla coloquial y la mezcla de idiomas como intención, no como sintaxis. Una petición como «Yaar thoda thanda lag raha hai» («Tío, tengo un poco de frío») reduce la velocidad del ventilador y ajusta el aire acondicionado sin que el usuario tenga que mencionar ninguno de los dos dispositivos. 

.

Una interfaz conversacional para toda la plataforma Havells One

Voice Mode abarca varias categorías de dispositivos inteligentes en la plataforma Havells One: aires acondicionados, ventiladores, purificadores de aire, purificadores de agua, calentadores de agua, lavadoras, interruptores inteligentes y próximos dispositivos.

La cobertura es amplia tanto dentro de cada categoría como entre ellas, e incluye modelos y variantes cuyos comandos de voz permiten controlar la velocidad, los modos, los temporizadores y la rotación inversa.

Como la misma capa conversacional está presente en todas las categorías, una única instrucción hablada puede actuar sobre dispositivos inteligentes de Havells aunque utilicen protocolos de conectividad diferentes. «Geyser on karo aur fan bhi chalu karo» («Enciende el ventilador y el calentador de agua») se divide y ejecuta en varios dispositivos Havells a la vez.

Retención de contexto y aclaraciones en conversaciones de varios turnos

El agente de Havells tiene diez capacidades en producción: comprensión del lenguaje natural, memoria de contexto, orquestación multidispositivo, conocimiento del contexto, IA multilingüe, activación sin configuración, control de dispositivos entre protocolos, respuesta conversacional bidireccional, diagnóstico de errores y automatización basada en reglas. En la práctica, esto se traduce en:

• «Fan slow karo ... thoda aur» («Baja la velocidad del ventilador... un poco más») se interpreta como una continuación, por lo que el usuario no tiene que repetir el comando completo.
• «AC chalu karo» en una casa con dos aires acondicionados hace que el asistente pregunte en qué habitación, en lugar de adivinar.
• «AC pe E6 dikh raha hai, kya hua?» devuelve una explicación en lenguaje sencillo del código de error y sugiere el siguiente paso.

Aquí, la respuesta conversacional bidireccional es tan importante como el reconocimiento. El asistente confirma lo que ha hecho, explica lo que no puede hacer y pregunta antes de realizar una acción que, de otro modo, sería ambigua.

Del prototipo a producción en seis semanas

Havells contó con un prototipo funcional de su agente aproximadamente dos semanas después de iniciar el desarrollo, lo que validó el recorrido desde el comando hablado hasta la acción en el dispositivo y la respuesta hablada. La documentación de la API y el panel de control que influyeron en la decisión sobre la plataforma también se utilizaron durante el desarrollo, y el equipo de CRI integró directamente Voz a Texto y Texto a Voz en streaming.

Las semanas restantes se dedicaron a la complejidad propia de Havells, no a la capa de voz: el catálogo completo y multilingüe de dispositivos, las distintas capacidades de cada uno, los comandos complejos, los casos límite y los escenarios de recuperación. El equipo de ingeniería de ElevenLabs integrado con Havells trabajó para ajustar la calidad de voz y la pronunciación de los idiomas regionales de India, así como para configurar el streaming de forma que la latencia se mantuviera estable al crecer el número de sesiones simultáneas. La integración inicial y el despliegue listo para producción llevaron aproximadamente seis semanas.

Voice Mode ya está disponible para toda la base de usuarios de Havells One, una app que ha superado los 2,7 millones de descargas. Esta escala proporciona al equipo de CRI datos de interacción reales para mejorar en todos los idiomas, dispositivos y tipos de comandos.

Esta capacidad de voz IA agéntica supone un avance decisivo para nuestros clientes, ya que les permite controlar e interactuar con sus dispositivos de forma natural, sin tener que recordar comandos ni aprender reglas. Su potencial es ilimitado y seguirá ampliándose a medida que se incorporen nuevas capacidades a nuestros dispositivos y servicios. Como experiencia de IA para uso diario, muestra el potencial transformador de los agentes de IA, mucho más allá de las interfaces de voz tradicionales del pasado. Para utilizar esta función, consumidores solo necesitan un dispositivo inteligente de Havells registrado en su app Havells One.

- Dipesh Shah, presidente ejecutivo y CTO de Havells

Durante cien años, la industria de los electrodomésticos ha vendido productos. Lo que estamos construyendo ahora es una relación: un hogar que percibe, aprende y responde al lenguaje y al ritmo de la familia que vive en él.

- Harikumar Varrier, vicepresidente sénior de CRI IoT, Havells

Mirando al futuro

Havells considera Agentic AI Voice Mode como la base de una experiencia de hogar inteligente más amplia, no como una función terminada, y ha definido cuatro líneas de expansión:

1. Una personalización más profunda, para que el hogar responda a las preferencias y rutinas diarias de cada integrante del hogar, en vez de tratar a todos los usuarios por igual.
2. Mayor cobertura lingüística, porque el idioma sigue siendo la principal barrera para la adopción en India y ocho idiomas son solo un punto de partida.
3. Una puerta de acceso centrada en la voz a todo el ecosistema de Havells, que complemente las apps, los dispositivos individuales y los paneles de control, e incorpore al ecosistema electrodomésticos que actualmente no están conectados para integrarlos después en la plataforma de voz.
4. La voz más allá de los comandos de encendido, apagado y valores de ajuste, ampliándola a preguntas frecuentes sobre productos, resolución de problemas, rutinas de automatización y programación.

Desarrollada por el equipo de CRI bajo la filosofía «Hecho en India, hecho para el mundo», la plataforma combina tecnología global con un profundo conocimiento de los hogares, los idiomas y los estilos de vida de India. A medida que crece el ecosistema, el objetivo sigue siendo mantener una experiencia natural, ágil, multilingüe y personalizada, permitiendo que la tecnología se adapte a las personas en lugar de exigir que las personas se adapten a la tecnología.