Robot Gemini

Robot contrôlé par Gemini à l'aide de commandes en langage naturel.

Description

Notre innovation révolutionne la façon dont les humains interagissent avec les robots. Notre application combine la puissante IA de Google Gemini avec des instructions utilisateur de base et une reconnaissance intelligente des objets à l'aide d'AutoML Vertex AI. Vous pouvez désormais donner des instructions à un robot en langage courant (par exemple, "Fais un bonhomme de neige") et le regarder raisonner et exécuter la tâche.
Comment Gemini opère-t-il sa magie ? Commencez par saisir la tâche que vous souhaitez voir réalisée. Ensuite, une caméra scanne la zone, et notre application utilise l'IA pour identifier et localiser les objets. La puissance de Gemini interprète votre commande, analyse la scène et crée un plan par étapes (flux robotique) pour le robot. Enfin, le plan est traduit en instructions que le robot peut suivre. Pendant que le robot exécute les instructions, l'interface utilisateur affiche un aperçu de la solution prévue par Gemini dans le jumeau numérique.
Pourquoi est-ce important ? Cette application permet de gagner du temps : plus besoin de programmer des robots complexes : n'importe qui peut contrôler un robot sans effort, sans expérience préalable. De plus, il est évolutif: la flexibilité de Gemini ouvre la voie à d'innombrables applications robotiques dans tous les secteurs. Il est donc idéal pour les environnements très dynamiques.
Notre application montre comment Gemini peut rendre les robots plus accessibles et adaptables que jamais. Cela pourrait transformer d'innombrables secteurs économiques, comme la fabrication, la logistique et même la façon dont nous interagissons avec la technologie dans nos maisons. Nous sommes ravis de participer à cette révolution passionnante.

Conçu avec

  • Web/Chrome
  • Vertex AI AutoML
  • Vertex AI Workbench
  • Google Cloud Storage

Équipe

Par

SOTEC GmbH & Co KG

De

Allemagne