FreshPick AI

Działanie

AI FreshPick ma zrewolucjonizować sposób, w jaki ludzie wybierają produkty spożywcze, ułatwiając i usprawniając wybór świeżych produktów. Dzięki integracji z aplikacją WhatsApp użytkownicy mogą po prostu robić zdjęcia produktów podczas zakupów i wysyłać je do naszego bota. Do analizowania tych obrazów używamy zaawansowanych możliwości modelu Gemini 1.5 Flash. Po otrzymaniu obrazu Gemini przetwarza go, szukając określonych cech wizualnych, które wskazują na świeżość, takich jak jednolitość koloru, struktura, dojrzałość i oznaki zepsucia, takie jak siniaki lub przebarwienia. Używamy starannie opracowanego prompta, który instruuje Gemini, jakie atrybuty wizualne oceniać w przypadku różnych rodzajów produktów. Ten prompt został utworzony na podstawie danych zebranych z wielu wiarygodnych witryn, które kategoryzują cechy świeżych warzyw i owoców, oraz z moich własnych doświadczeń w zakresie doboru produktów. Prompt instruuje model, aby analizował tylko cechy wizualne, sugerując przy tym inne ważne czynniki, takie jak dźwięk, dotyk, wrażenia dotykowe i twardość.
Model Gemini 1.5 Flash jest bardzo szybki. Podczas eksperymentowania z modelami, które zwracały w odpowiedzi pełne obrazy z wyznaczonymi granicami, odkryliśmy, że dzięki odpowiedniej obróbce promptów i nieco pomocy z podręczników możemy uzyskać tylko współrzędne prostokąta ograniczającego. Te współrzędne nakładamy na obraz. Gemini podaje szczegółowe uzasadnienie swoich wyborów, wyjaśniając, dlaczego określone produkty są rekomendowane na podstawie cech wizualnych.