Shopify ayuda a los comercios a tener éxito con Sidekick, un asistente de IA multimodal potenciado por la API de Live

Shopify es la plataforma de comercio global líder que proporciona la infraestructura esencial necesaria para iniciar, expandir y comercializar un negocio minorista de cualquier tamaño. En un esfuerzo continuo por mejorar la experiencia de sus comercios, el equipo de Shopify quería ofrecer un asistente personalizado y detallado para ayudar a millones de empresas a comenzar y expandirse en más de 175 países.

Para lograrlo, desarrollaron Sidekick, un asistente de IA diseñado para asociarse con los comercios en todo, desde el diseño hasta el análisis. Al integrar el procesamiento de voz y video a través de la API de Live, Sidekick se convierte en un asistente de comercio interactivo y capaz que puede ayudar en tiempo real, a menudo durante los períodos más difíciles de los comercios.

El equipo de Shopify quería que Sidekick conectara sin problemas el conocimiento del comercio con las necesidades únicas de un comercio. En el modo de voz, Sidekick puede ayudar a los comercios a navegar por el administrador de Shopify, buscar recursos de la tienda, extraer estadísticas sobre el rendimiento de la tienda y realizar otras acciones a través de herramientas. Incluso puede ayudar a solucionar problemas fuera del administrador a través de la función de compartir pantalla.

Al combinar el razonamiento complejo con las interacciones activadas por voz, Sidekick brinda asistencia sólida lejos de un escritorio, lo que es fundamental para los comercios que suelen estar en movimiento, reunirse en un almacén o trabajar con las manos.

El equipo de Sidekick usó el audio nativo de Gemini 2.5 Flash y la API de Live para procesar audio y generar voz con un sonido realista y baja latencia. Las conversaciones debían sentirse responsivas, ya que las interrupciones en el flujo conversacional podían arruinar la experiencia del usuario y disuadir su uso. El equipo ajustó las indicaciones, el tono y el intercambio de turnos (cuándo debe interrumpir el bot y qué tan ansioso debe estar por hablar) para que las interacciones se sientan más naturales.

Estas capacidades de voz y video ayudaron a contrarrestar la expectativa de un chatbot simple, lo que evitó los problemas de muchos asistentes de IA. "A menudo, los usuarios olvidan que están hablando con una IA al minuto de usar Sidekick y, en algunos casos, le agradecen al bot después de una larga conversación", dijo David Wurtz, vicepresidente de Productos.

Crear un asistente de IA que se sintiera capaz y conversacional fue una tarea iterativa. En solo tres semanas, el equipo de Shopify pasó de crear prototipos con los modelos de Gemini en Google AI Studio a probar la función con usuarios reales en Vertex AI.

Desde el marketing hasta las operaciones, el equipo siempre busca ayudar a los comercios a expandir su negocio con su plataforma integrada. Wurtz dice: "Este es un momento emocionante para ser emprendedor. Las nuevas capacidades de IA, como las que ofrece Gemini, permiten a nuestros comercios ganar".