Harvey: Validating Gemini 2.5 Pro Preview’s Advanced Legal Reasoning with BigLaw Bench

विधि उद्योग को ऐसे एआई समाधानों की आवश्यकता है जो जटिल सूचनाओं की विशाल मात्रा को सटीकता और सूक्ष्मता के साथ संचालित कर सकें. एआई के लिए तय किए गए पारंपरिक बेंचमार्क, अक्सर कानूनी काम से जुड़ी असल दुनिया की ज़रूरतों को पूरा नहीं कर पाते. इसलिए, ऐसे मॉडल की पहचान करना मुश्किल हो जाता है जो कानूनी काम को बेहतर तरीके से कर सकते हैं. Harvey, एक डाइनैमिक स्टार्टअप है. यह एआई की मदद से, कानूनी वर्कफ़्लो को बेहतर बनाने के लिए काम करता है. इसने इस समस्या को हल करने के लिए, BigLaw Bench को डेवलप किया है. यह एक ऐसा फ़्रेमवर्क है जो कानूनी काम से मिलते-जुलते टास्क पर, लार्ज लैंग्वेज मॉडल (एलएलएम) की परफ़ॉर्मेंस का आकलन करता है. हाल ही में किए गए कड़े आकलन में, Gemini 2.5 Pro Preview ने बेहतरीन परफ़ॉर्मेंस दिखाई है. इससे पता चलता है कि यह कानूनी मामलों से जुड़े मुख्य विषयों में, काम को बेहतर तरीके से करने की क्षमता रखता है.

बिगलॉ बेंच फ्रेमवर्क का लाभ उठाते हुए हार्वे के हालिया मूल्यांकनों ने स्पष्ट रूप से संकेत दिया है कि जेमिनी 2.5 प्रो प्रीव्यू मुख्य कानूनी तर्क कार्यों में उल्लेखनीय दक्षता प्रदर्शित करता है, और विशेष रूप से, लंबे-फॉर्म कानूनी इनपुट या आउटपुट पर तर्क की आवश्यकता वाले कार्यों में. जैसा कि हार्वे के सार्वजनिक रूप से साझा किए गए परिणामों में दिखाया गया है, जो जेमिनी 2.5 प्रो प्रीव्यू सहित मॉडलों का उनके संबंधित एपीआई के माध्यम से परीक्षण करके प्राप्त किए गए, जेमिनी 2.5 प्रो प्रीव्यू ने बिगलॉ बेंच पर 85.02% का अग्रणी स्कोर प्राप्त किया, जो इस व्यापक मूल्यांकन में मूल्यांकित अन्य मॉडलों से बेहतर प्रदर्शन था.

यह अग्रणी क्षमता उच्च मूल्य वाली कानूनी गतिविधियों की एक विस्तृत श्रृंखला के लिए महत्वपूर्ण है. BigLaw Bench में, Gemini 2.5 Pro Preview की क्षमताओं को दिखाने वाले मुख्य टास्क:

• लेन-देन से जुड़ी ज़रूरी जांच: Gemini 2.5 Pro Preview में, लंबी अवधि के कई सेवा समझौतों से ज़रूरी प्रावधानों (जैसे, असाइनमेंट, क्षतिपूर्ति, समझौते को खत्म करने से जुड़े क्लॉज़) को निकालने और उनकी खास जानकारी देने की बेहतरीन क्षमता देखी गई. इससे पता चलता है कि मैन्युअल तरीके से दस्तावेज़ की समीक्षा करने में लगने वाले समय को कम किया जा सकता है.
• लेनदेन संरचना: मॉडल ने जटिल वित्तीय विकल्पों (जैसे, PIPE, अंडरराइट किए गए इक्विटी ऑफ़र, बॉन्ड ऑफ़र). मॉडल ने इस जानकारी को साफ़ तौर पर और आसानी से समझने लायक तरीके से पेश किया. यह जानकारी उन लोगों के लिए भी आसानी से समझी जा सकती है जिन्हें वित्तीय मामलों की ज़्यादा जानकारी नहीं है. साथ ही, मॉडल ने तुरंत कार्रवाई करने के लिए सुझाव भी दिए.
• मुकदमे से जुड़े दस्तावेज़ तैयार करना: मुकदमे से जुड़े टास्क के लिए आकलन करने पर, Gemini 2.5 Pro Preview ने कानूनी जानकारी देने वाले दस्तावेज़ों के आधार पर, कानूनी जानकारी देने वाले नोट के लिए ज़्यादा जानकारी वाली आउटलाइन जनरेट करने की बेहतरीन क्षमता दिखाई. यह क्षमता ऐसे भविष्य की ओर इशारा करती है जहां एआई कानूनी तर्क विकास और संगठन के प्रारंभिक चरणों में महत्वपूर्ण रूप से सहायता कर सकता है.
• दस्तावेज़ की समीक्षा और विश्लेषण: अलग-अलग ट्रायल दस्तावेज़ों (कॉल लॉग, ईमेल, ज्ञापन) की समीक्षा से पता चला कि Gemini 2.5 Pro Preview, घटनाओं के क्रम के हिसाब से सारांश बनाने में बेहतर है. इसके अलावा, मॉडल ने रिकॉर्ड में मौजूद गंभीर विसंगतियों और अस्पष्टताओं की पहचान करने में भी अच्छा प्रदर्शन किया. यह कानूनी विश्लेषण का एक अहम पहलू है.

इन सभी आकलन में, Gemini 2.5 Pro Preview ने तर्क करने की बेहतरीन क्षमता दिखाई. इसमें सैकड़ों पेजों के इनपुट शामिल थे. क़ानूनी काम में ऐसा अक्सर होता है. इसके अलावा, यह इन सामग्रियों का इस्तेमाल करके, ज़्यादा जानकारी वाले और बड़े आउटपुट जनरेट कर सकता था. इससे ज़्यादा अहम जानकारी और विश्लेषण मिल पाते थे. ये मुख्य क्षमताएं जटिल कानूनी कार्यों में जेमिनी 2.5 प्रो प्रीव्यू का लाभ उठाने की क्षमता को उजागर करती हैं, जिसमें परिश्रम, समीक्षा और उपयोग मामलों का मसौदा तैयार करने के लिए दस्तावेजों के बड़े सेट पर तर्क की आवश्यकता होती है.

Harvey के हेड ऑफ़ अप्लाइड एआई, निको ग्रुपन कहते हैं,"Harvey में, हम कानूनी पेशेवरों को सबसे आधुनिक टूल उपलब्ध कराने के लिए प्रतिबद्ध हैं." "BigLaw Bench के ज़रिए Gemini 2.5 Pro Preview का आकलन करने पर, हमें पता चला है कि यह मुश्किल कानूनी जानकारी को इकट्ठा करने में काफ़ी बेहतर है. इस अहम जानकारी से, हमें आने वाले समय में प्रॉडक्ट डेवलपमेंट के लिए दिशा मिलती है. हमारा लक्ष्य इन खूबियों का इस्तेमाल करके, अभूतपूर्व दक्षता हासिल करना है. साथ ही, वकीलों को ज़्यादा अहम रणनीतिक काम पर ध्यान देने में मदद करना है."

Harvey, एआई मॉडल का बारीकी से आकलन करने और Gemini 2.5 Pro Preview जैसे बेहतरीन एआई मॉडल का विश्लेषण करने के लिए प्रतिबद्ध है. इससे पता चलता है कि कानूनी क्षेत्र में एआई कितना अहम है. इनकी खोजों से, आने वाले समय में होने वाले इनोवेशन का रास्ता खुलता है. इससे कानूनी पेशेवरों को अपने सबसे मुश्किल कामों को करने का तरीका बदलने में मदद मिलेगी.

Gemini 2.5 Pro Preview की बेहतर रीज़निंग और सिंथेसिस की क्षमताओं के बारे में जानने के लिए, Gemini API का दस्तावेज़ पढ़ें या Google AI Studio में जाकर इसे आज़माएँ.

हार्वे Google के AI फ़्यूचर्स फ़ंड में भागीदार हैं, जो AI के क्षेत्र में आगे बढ़ने वाले महत्वाकांक्षी स्टार्टअप में निवेश करता है और उनके साथ सहयोग करता है.