2025 年 5 月 16 日
Harvey: BigLaw Bench で Gemini 2.5 Pro プレビュー版の高度な法的推論を検証する
Harvey: BigLaw Bench で Gemini 2.5 Pro プレビュー版の高度な法的推論を検証
法務業界では、膨大な量の複雑な情報を正確かつニュアンスを理解して処理できる AI ソリューションが求められています。従来の AI ベンチマークでは、法律実務の現実世界のニーズを捉えきれないことが多く、価値の高い法律業務を真に実行できるモデルを特定することが困難です。AI を通じて法律業務のワークフローを変革することに専念しているダイナミックなスタートアップである Harvey は、実際の法律業務を反映したタスクで大規模言語モデル(LLM)のパフォーマンスを評価するための包括的なフレームワークである BigLaw Bench を開発することで、この問題に対処しました。最近の厳格な評価では、Gemini 2.5 Pro プレビュー版が優れたパフォーマンスを発揮し、主要な法務分野の効率性を向上させる優れた可能性を示しました。
Gemini 2.5 Pro プレビュー版が BigLaw Bench をリード
Harvey が BigLaw Bench フレームワークを活用して実施した最近の評価では、Gemini 2.5 Pro プレビュー版が、コアとなる法的推論タスク、特に長文の法的入力または出力を必要とするタスクにおいて、優れた能力を発揮することが明確に示されています。Harvey が公開した結果(それぞれの API を介して Gemini 2.5 Pro プレビューを含むモデルをテストして得られたもの)に示されているように、Gemini 2.5 Pro プレビューは BigLaw Bench で 85.02% というトップスコアを達成し、この包括的な評価で評価された他のモデルを上回りました。
この優れた機能は、さまざまな価値の高い法的活動に不可欠です。BigLaw Bench の主な評価タスクでは、Gemini 2.5 Pro プレビュー版の強みが示されました。
- 取引のデュー デリジェンス: Gemini 2.5 Pro プレビューでは、複数の長いサービス契約から重要な条項(譲渡、補償、解除条項など)を抽出して要約する優れた能力が示されました。これにより、手動のドキュメント審査という時間のかかるプロセスを効率化できる可能性が大幅に高まります。
- 取引の構造化: このモデルは、複雑な金融オプション(PIPE、引受株式募集、債券募集など)。このモデルは、財務に関する深い専門知識を持たない人でも、この情報を明確かつアクセスしやすい方法で提示し、すぐに実行できる可能性のあるアクション アイテムを提案するという点で有望でした。
- 訴訟の起草: 訴訟関連のタスクで評価された Gemini 2.5 Pro プレビュー版は、大量のブリーフィング ドキュメントに基づいて法的ブリーフの詳細な概要を生成する優れた能力を示しました。この機能は、AI が法的議論の展開と構成の初期段階で大きな助けとなる未来を示しています。
- ドキュメントのレビューと分析: さまざまな試験ドキュメント(通話ログ、メール、メモ)のレビューを含む評価では、Gemini 2.5 Pro Preview がイベントの時系列の概要を首尾一貫して作成する能力に優れていることが明らかになりました。さらに、このモデルは、記録内の重大な不整合や曖昧さを特定する可能性を示しており、これは徹底的な法的分析の重要な側面です。
これらの評価を通じて、Gemini 2.5 Pro プレビューは、数百ページの資料からなる入力に対して、優れた推論能力を発揮しました。これは、法律業務では一般的なシナリオです。また、これらの資料を使用して、より長い形式の包括的な出力を生成し、より深い分析情報と分析を可能にしました。これらのコア機能は、デュー デリジェンス、レビュー、ユースケースの作成をサポートするために大量のドキュメントを推論する必要がある複雑な法的業務全体で Gemini 2.5 Pro プレビューを活用できる可能性を示しています。
法務 AI の新しい基準
「Harvey では、法律専門家に最先端のツールを提供することに注力しています」と、Harvey の応用 AI 責任者である Niko Grupen 氏は述べています。「BigLaw Bench を通じて Gemini 2.5 Pro プレビュー版を評価した結果、複雑な法的情報を合成する優れた能力が明らかになりました。この分析情報は、将来のプロダクト開発のビジョンを支えるものであり、これらの強みを活かして前例のない効率性を実現し、弁護士がより高度な戦略的業務に専念できるようにすることを目指しています。」
Unlocking the Future of Legal Work
Harvey は、厳格な評価と、Gemini 2.5 Pro プレビュー版などの最先端の AI モデルの洞察に満ちた分析を通じて、法律分野における AI の変革の可能性を示しています。彼らの研究結果は、法律専門家が最も要求の厳しい業務に取り組む方法を根本から変える将来のイノベーションへの道を開くものである。
Gemini 2.5 Pro Preview の高度な推論および合成機能が、どのように独自のアプリケーションを強化できるかについては、Gemini API ドキュメントまたは始めるGoogle AI スタジオ。
ハーヴェイはGoogle の AI フューチャーズファンドAI の未来を築く意欲的なスタートアップ企業に投資し、協力しています。