शेयर करें

30 अक्टूबर, 2024

Gemini API की मदद से, एआई एजेंट को प्रोडक्शन में लाना

विशाल धर्माधिकारी

प्रॉडक्ट सॉल्यूशंस इंजीनियर

पेज बेली

एआई डेवलपर एक्सपीरिएंस इंजीनियर

ऐडम सिल्वरमैन

सीओओ, एजेंसी एआई

AgentOps की हीरो इमेज

एआई एजेंट बनाना और उन्हें डिप्लॉय करना एक दिलचस्प काम है. हालांकि, प्रोडक्शन एनवायरमेंट में इन जटिल सिस्टम को मैनेज करने के लिए, बेहतर ऑब्ज़र्वेशन की ज़रूरत होती है. AgentOps, एजेंट की परफ़ॉर्मेंस को मॉनिटर करने, एलएलएम की लागत को ट्रैक करने, बेंचमार्किंग करने वगैरह के लिए Python SDK है. यह डेवलपर को अपने एजेंट को प्रोटोटाइप से प्रोडक्शन तक ले जाने में मदद करता है. खास तौर पर, जब इसे Gemini API की क्षमता और किफ़ायती लागत के साथ जोड़ा जाता है.

AgentOps प्लैटफ़ॉर्म का यूज़र इंटरफ़ेस (यूआई), जिसमें Gemini को काम करते हुए दिखाया गया है

Gemini के फ़ायदे

एजेंटऑप्स के पीछे की टीम, एजेंसी एआई के सीओओ एडम सिल्वरमैन बताते हैं कि बड़े पैमाने पर एआई एजेंट तैनात करने वाले उद्यमों के लिए लागत एक महत्वपूर्ण कारक है. "हमने देखा है कि कंपनियां, एलएलएम कॉल पर हर महीने 80,000 डॉलर खर्च करती हैं. Gemini 1.5 के साथ, इसी आउटपुट के लिए कुछ हज़ार डॉलर खर्च करने पड़ते."

यह मॉडल, कम लागत में उपलब्ध है. साथ ही, इसमें भाषा को समझने और जनरेट करने की बेहतरीन क्षमताएं हैं. इसलिए, यह उन डेवलपर के लिए सबसे सही विकल्प है जो बेहतर एआई एजेंट बना रहे हैं. सिल्वरमैन कहते हैं, "जेमिनी 1.5 फ्लैश हमें बड़े मॉडलों के बराबर गुणवत्ता प्रदान करता है, वह भी लागत के एक अंश पर, जबकि यह अविश्वसनीय रूप से तेज़ है." इससे डेवलपर, कई चरणों वाले जटिल एजेंट वर्कफ़्लो बनाने पर फ़ोकस कर सकते हैं. साथ ही, उन्हें ज़्यादा खर्च की चिंता करने की ज़रूरत नहीं होती.

“हमने देखा है कि अन्य एलएलएम उपलब्ध कराने वाली कंपनियों के साथ, अलग-अलग एजेंट को चलाने पर हर बार 500 डॉलर से ज़्यादा का खर्च आता है. Gemini (1.5 Flash-8B) के साथ इन सभी रन की लागत 50 डॉलर से कम है.”

— एडम सिल्वरमैन, सीओओ, एजेंसी एआई

AgentOps डैशबोर्ड का मॉक अप, जिसमें आंकड़े और विश्लेषण दिखाया गया है

एआई एजेंट को बेहतर बनाना

AgentOps, हर एजेंट इंटरैक्शन का डेटा कैप्चर करता है. इसमें सिर्फ़ एलएलएम कॉल ही नहीं, बल्कि यह भी शामिल होता है कि मल्टी-एजेंट सिस्टम कैसे काम करते हैं. विवरण का यह विस्तृत स्तर इंजीनियरिंग और अनुपालन टीमों के लिए आवश्यक है, जो डिबगिंग, अनुकूलन और ऑडिट ट्रेल्स के लिए महत्वपूर्ण अंतर्दृष्टि प्रदान करता है.

Gemini के मॉडल को AgentOps के साथ इंटिग्रेट करना बहुत आसान है. LiteLLM का इस्तेमाल करके, इसे कुछ ही मिनटों में किया जा सकता है. डेवलपर्स शीघ्रता से अपने जेमिनी एपीआई कॉल्स की दृश्यता प्राप्त कर सकते हैं, वास्तविक समय में लागतों को ट्रैक कर सकते हैं, तथा उत्पादन में अपने एजेंटों की विश्वसनीयता सुनिश्चित कर सकते हैं.

आगे की योजनाएं

AgentOps, एजेंट डेवलपर को उनके प्रोजेक्ट को आगे बढ़ाने में मदद करता है. Agency AI, एंटरप्राइज़ को कम लागत में, ज़्यादा से ज़्यादा एजेंट बनाने में मदद कर रहा है. इससे AgentOps को Gemini API के साथ इस्तेमाल करने के फ़ायदे और बढ़ जाते हैं. जैसा कि सिल्वरमैन ने जोर देकर कहा, "यह एजेंटों के निर्माण के लिए अधिक मूल्य-सचेत डेवलपर्स को प्रेरित कर रहा है."

जेमिनी का उपयोग करने पर विचार कर रहे डेवलपर्स के लिए, सिल्वरमैन की सलाह स्पष्ट है: "इसे आज़माएँ, और आप प्रभावित होंगे."