Turtlebot3 উপলব্ধির জন্য মিথুন এজেন্ট

এটা কি করে

অ্যাপটি 4x5 গ্রিডে turtlebot3 রোবটের অবস্থান নিরীক্ষণ করতে Gemini দ্বারা সমর্থিত একটি এজেন্ট ব্যবহার করে যাতে এটি ভবিষ্যতের পথ পরিকল্পনা এবং নেভিগেশনের জন্য কাজ করে। Geimini এর মাল্টিমোডাল ক্ষমতার কিছু পরীক্ষার উপর ভিত্তি করে এটি স্পষ্ট যে বস্তু সনাক্তকরণ এবং অবস্থান এমন কিছু নয় যা এটি বাক্সের বাইরে করতে পারে। সেই কারণে, আমি একটি টুল হিসাবে একটি বিশেষ মডেল (গ্রাউন্ডিং ডিনো) সংহত করার সিদ্ধান্ত নিয়েছি যা রোবট সনাক্তকরণে জেমিনি এজেন্টকে আরও ভাল কাজ করতে সহায়তা করতে পারে। একবার গ্রিডে রোবট শনাক্ত হয়ে গেলে আমরা এজেন্টকে অন্যান্য জটিল কাজ বলতে পারি যেমন রোবটটিকে এক অবস্থান থেকে অন্য স্থানে সরানোর জন্য একটি পথের পরিকল্পনা করা এবং এমনকি ROS ব্রিজ ইন্টিগ্রেশনের সাথে পাথ চালানোর জন্য নিয়ন্ত্রণ কমান্ড পাঠাতে পারি।