FreshPick AI
毎回最高の農産物を選ぶ。WhatsApp でチャットや写真の送信のみを行う
機能
FreshPick AI は、新鮮な食材を簡単に正確に選ぶことができるようにすることで、人々の食材の選び方に革命をもたらすように設計されています。WhatsApp と直接統合されているため、ユーザーは買い物中に野菜や果物の写真を撮ってボットに送信するだけで、Google は、Gemini 1.5 Flash の強力な機能を使用してこれらの画像を分析しています。画像が受信されると、Gemini は画像を処理し、新鮮さを示す特定の視覚的特性(色の均一性、食感、熟度、傷や変色などの腐敗の兆候など)を探します。さまざまな種類の農産物について評価すべき視覚的属性を Gemini に指示する、慎重に作成されたプロンプトを使用しています。このプロンプトは、信頼できる複数のウェブサイトから収集されたデータに基づいて作成されています。新鮮な野菜や果物の特徴を分類し、私自身の食材選びの専門知識も取り入れました。このプロンプトは、視覚的な特徴のみを分析し、音、触感、感触、硬さなどの他の重要な要素をユーザーに直接提案するようにモデルに指示します。
Gemini 1.5 Flash は非常に高速です。境界がマークされた画像全体を返すモデルをテストしたところ、プロンプト エンジニアリングとクックブックの助けを借りて、境界ボックスの座標のみを取得できることがわかりました。これらの座標は画像にオーバーレイされます。Gemini は、選択の理由を詳しく説明します。たとえば、視覚的な特徴に基づいて特定の農産物が推奨される理由を説明します。
構成
- なし
- GCP 関数を使用して、Python Webhook ベースのコードを実装しました。
チーム
By
無知なプロデューサー エキスパート
差出人
米国