Shopify는 Live API 기반의 멀티모달 AI 어시스턴트인 도우미를 통해 판매자가 성공할 수 있도록 지원합니다.

Shopify는 모든 규모의 소매 비즈니스를 시작, 확장, 마케팅하는 데 필요한 필수 인프라를 제공하는 선도적인 글로벌 상거래 플랫폼입니다. 판매자 경험을 개선하기 위해 지속적으로 노력하는 Shopify팀은 수백만 개의 비즈니스가 175개 이상의 국가에서 시작하고 확장할 수 있도록 맞춤형 심층 어시스턴트를 제공하고자 했습니다.

이를 위해 디자인부터 분석에 이르기까지 모든 측면에서 판매자와 협력하도록 설계된 AI 어시스턴트인 Sidekick을 개발했습니다. Live API를 통해 음성 및 동영상 처리를 통합함으로써 Sidekick은 실시간으로 지원할 수 있는 대화형의 유능한 상거래 어시스턴트이며, 특히 판매자에게 가장 어려운 시기에 도움이 될 수 있습니다.

Shopify팀은 Sidekick이 상거래 지식을 판매자의 고유한 요구사항에 원활하게 연결하기를 원했습니다. 음성 모드에서 Sidekick은 판매자가 Shopify 관리자를 탐색하고, 매장 리소스를 검색하고, 매장 실적에 대한 분석을 가져오고, 도구를 통해 기타 작업을 수행하도록 지원할 수 있습니다. 화면 공유 기능을 통해 관리자 외부의 문제를 해결하는 데도 도움이 될 수 있습니다.

Sidekick은 복잡한 추론과 음성 기반 상호작용을 결합하여 사무실을 벗어난 환경에서 강력한 지원을 제공합니다. 이는 이동이 잦거나 창고에서 회의를 하거나 손으로 작업하는 판매자에게 매우 중요합니다.

Sidekick팀은 Gemini 2.5 Flash 네이티브 오디오와 Live API를 사용하여 오디오를 처리하고 지연 시간이 짧은 현실적인 음성을 출력했습니다. 대화 흐름이 중단되면 사용자 환경이 망가지고 사용을 중단할 수 있으므로 대화는 반응성이 있어야 했습니다. 팀은 상호작용이 더 자연스럽게 느껴지도록 봇이 언제 말을 끊어야 하는지, 얼마나 적극적으로 말해야 하는지 등의 신호, 어조, 순서를 조정했습니다.

이러한 음성 및 동영상 기능은 간단한 챗봇에 대한 기대를 깨고 많은 AI 어시스턴트의 함정을 피하는 데 도움이 되었습니다. 제품 부문 부사장인 데이비드 워츠는 '사용자는 Sidekick을 사용한 지 1분도 안 돼 AI와 대화하고 있다는 사실을 잊는 경우가 많으며, 긴 채팅 후 봇에게 감사 인사를 전하는 경우도 있습니다'라고 말했습니다.

능력 있고 대화형인 AI 어시스턴트를 만드는 것은 반복적인 작업이었습니다. Shopify팀은 Google AI Studio에서 Gemini 모델로 프로토타입을 제작한 후 3주 만에 Vertex AI에서 실제 사용자를 대상으로 기능을 테스트했습니다.

마케팅부터 운영까지, 이 팀은 항상 판매자가 통합 플랫폼을 통해 비즈니스를 확장할 수 있도록 지원합니다. Wurtz는 '지금은 기업가에게 흥미로운 시기입니다. Gemini를 통해 제공되는 것과 같은 새로운 AI 기능을 통해 판매자는 승리할 수 있습니다.”