A Shopify ajuda os comerciantes a vencer com o Sidekick, um assistente de IA multimodal com tecnologia da API Live

A Shopify é a principal plataforma de comércio global, oferecendo a infraestrutura essencial para iniciar, dimensionar e comercializar uma empresa de varejo de qualquer tamanho. Em um esforço contínuo para melhorar a experiência dos comerciantes, a equipe da Shopify queria oferecer um assistente personalizado e detalhado para ajudar milhões de empresas a começar e crescer em mais de 175 países.

Para isso, eles desenvolveram o Sidekick, um assistente de IA projetado para trabalhar com comerciantes em tudo, desde design até análises. Ao integrar o processamento de voz e vídeo pela API Live, o Ajudante é um assistente de comércio interativo e eficiente que pode ajudar em tempo real, muitas vezes durante os períodos mais desafiadores para os comerciantes.

A equipe da Shopify queria que o Sidekick conectasse o conhecimento de comércio às necessidades exclusivas de um comerciante. No modo de voz, o Sidekick pode ajudar os comerciantes a navegar no admin da Shopify, pesquisar recursos da loja, extrair análises sobre a performance da loja e realizar outras ações usando ferramentas. Ele pode até ajudar a resolver problemas fora do administrador usando o recurso de compartilhamento de tela.

Ao combinar raciocínio complexo com interações por voz, o Sidekick oferece suporte robusto longe de um espaço de trabalho, o que é essencial para comerciantes que estão sempre em movimento, se reúnem em um depósito ou trabalham com as mãos.

A equipe do Ajudante usou o áudio nativo do Gemini 2.5 Flash e a API Live para processar áudio e gerar fala com som realista e baixa latência. As conversas precisavam ser responsivas, já que interrupções no fluxo de conversa poderiam prejudicar a experiência do usuário e desencorajar o uso. A equipe ajustou as dicas, o tom e a troca de turnos (quando o bot deve interromper e o quanto ele deve estar ansioso para falar) para tornar as interações mais naturais.

Esses recursos de voz e vídeo ajudaram a evitar a expectativa de um chatbot simples, evitando os problemas de muitos assistentes de IA. "Os usuários costumam esquecer que estão conversando com a IA em menos de um minuto de uso do Sidekick e, em alguns casos, agradecem ao bot depois de uma longa conversa", disse David Wurtz, vice-presidente de produtos.

Criar um assistente de IA que parecesse capaz e conversacional foi uma tarefa iterativa. Em apenas três semanas, a equipe da Shopify passou da prototipagem com modelos do Gemini no Google AI Studio para o teste do recurso com usuários reais na Vertex AI.

Do marketing às operações, a equipe está sempre buscando ajudar os comerciantes a expandir os negócios com a plataforma integrada. Wurtz diz: "Este é um momento incrível para ser empreendedor. Novos recursos de IA, como os oferecidos pelo Gemini, ajudam nossos comerciantes a vencer".