تكنولوجيا الذكاء الاصطناعي في FreshPick

وظيفتها

تم تصميم تكنولوجيات الذكاء الاصطناعي في FreshPick لإحداث ثورة في طريقة اختيار الناس للمنتجات من خلال تسهيل عملية اختيار المنتجات الطازجة بدقة. تم دمج هذه الميزة مباشرةً مع WhatsApp، ما يتيح للمستخدمين التقاط صورة لمحصولهم أثناء التسوّق وإرسالها إلى الروبوت. نستخدم الإمكانات القوية لنموذج Gemini 1.5 Flash لتحليل هذه الصور. عند تلقّي صورة، يعالجها Gemini من خلال البحث عن خصائص مرئية معيّنة تشير إلى مدى نضارة الطعام، مثل توحيد اللون والملمس والنضج وعلامات التلف، مثل الكدمات أو تغير اللون. نستخدم طلبًا مصمّمًا بعناية يوجّه Gemini إلى السمات المرئية التي يجب تقييمها لأنواع مختلفة من المنتجات. تم إنشاء هذه الرسالة بناءً على بيانات تم جمعها من عدة مواقع إلكترونية موثوق بها، وهي تحدّد خصائص الخضار والفواكه الطازجة، بالإضافة إلى بعض خبرتي في اختيار المنتجات. يوجّه الطلب النموذج على وجه التحديد إلى تحليل السمات المرئية فقط مع اقتراح عوامل مهمة أخرى على المستخدم مباشرةً، مثل الصوت واللمس والشعور والصلابة.
يُعدّ نموذج Gemini 1.5 Flash سريعًا جدًا، وبينما جرّبنا نماذج عرضت صورًا كاملة مع حدود مميّزة استجابةً للطلب، تبيّن لنا أنّه من خلال هندسة الطلبات وبعض المساعدة من كتب الطبخ، يمكننا الحصول على إحداثيات المربّع الحدودي فقط. ونضع هذه الإحداثيات على الصورة. تقدّم Gemini أسبابًا تفصيلية لاختياراتها، وتوضّح سبب اقتراح منتجات معيّنة استنادًا إلى الخصائص المرئية.