Shopify aiuta i commercianti a vincere con Sidekick, un assistente AI multimodale basato sull'API Live

Shopify è la piattaforma di e-commerce leader a livello globale, che fornisce l'infrastruttura essenziale necessaria per avviare, scalare e commercializzare un'attività di vendita al dettaglio di qualsiasi dimensione. Nel suo continuo impegno per migliorare l'esperienza dei commercianti, il team di Shopify voleva offrire un assistente personalizzato e approfondito per aiutare milioni di attività a iniziare e crescere in oltre 175 paesi.

Per raggiungere questo obiettivo, hanno sviluppato Sidekick, un assistente AI progettato per collaborare con i commercianti in ogni aspetto, dalla progettazione all'analisi. Integrando l'elaborazione di voce e video tramite l'API Live, Sidekick è un assistente commerciale interattivo e competente che può aiutare in tempo reale, spesso durante i periodi più difficili per i commercianti.

Il team di Shopify voleva che Sidekick collegasse in modo semplice le conoscenze commerciali alle esigenze specifiche di un commerciante. In modalità vocale, Sidekick può aiutare i commercianti a navigare nel pannello di controllo Shopify, cercare risorse per il negozio, estrarre analisi sul rendimento del negozio e altre azioni tramite gli strumenti. Può anche aiutarti a risolvere i problemi al di fuori dell'amministratore tramite la funzionalità di condivisione dello schermo.

Combinando ragionamenti complessi con interazioni vocali, Sidekick fornisce un supporto solido lontano dalla scrivania, fondamentale per i commercianti che sono spesso in movimento, si incontrano in un magazzino o lavorano manualmente.

Il team di Sidekick ha utilizzato Gemini 2.5 Flash Native Audio e l'API Live per elaborare l'audio e produrre un parlato dal suono realistico con bassa latenza. Le conversazioni dovevano essere reattive, poiché le interruzioni del flusso conversazionale potevano rovinare l'esperienza utente e scoraggiarne l'utilizzo. Il team ha modificato i segnali, il tono e l'alternanza dei turni (quando il bot deve interrompere e quanto deve essere ansioso di parlare) per rendere le interazioni più naturali.

Queste funzionalità vocali e video hanno contribuito a contrastare l'aspettativa di un semplice chatbot, evitando le insidie di molti assistenti AI. "Gli utenti spesso dimenticano di parlare con l'AI entro un minuto dall'utilizzo di Sidekick e, in alcuni casi, hanno ringraziato il bot dopo una lunga chat", ha affermato David Wurtz, VP of Product.

Creare un assistente AI che fosse competente e conversazionale è stato un compito iterativo. Il team di Shopify è passato dalla prototipazione con i modelli Gemini in Google AI Studio al test della funzionalità con utenti reali su Vertex AI in sole tre settimane.

Dal marketing alle operazioni, il team cerca sempre di aiutare i commercianti a far crescere la loro attività con la sua piattaforma integrata. Wurtz afferma: "È un momento entusiasmante per essere un imprenditore. Le nuove funzionalità di AI come quelle offerte da Gemini consentono ai nostri commercianti di avere successo".