Harvey: BigLaw Bench で Gemini 2.5 Pro プレビュー版の高度な法的推論を検証する

法曹界では、膨大な量の複雑な情報を正確かつニュアンスを理解して処理できる AI ソリューションが求められています。従来の AI ベンチマークでは、法律実務の現実世界のニーズを捉えきれないことが多く、価値の高い法律業務を真に実行できるモデルを特定することが困難です。AI を通じて法律業務のワークフローを変革することに専念しているダイナミックなスタートアップである Harvey は、実際の法律業務を反映したタスクで大規模言語モデル（LLM）のパフォーマンスを評価するための包括的なフレームワークである BigLaw Bench を開発することで、この問題に対処しました。最近の厳格な評価では、Gemini 2.5 Pro プレビュー版が優れたパフォーマンスを発揮し、主要な法務分野の効率を向上させる優れた可能性を示しました。

Harvey が BigLaw Bench フレームワークを活用して実施した最近の評価では、Gemini 2.5 Pro プレビュー版が、コアとなる法的推論タスク、特に長文の法的入力または出力を必要とするタスクにおいて、優れた能力を発揮することが明確に示されています。Harvey が公開した結果（それぞれの API を介して Gemini 2.5 Pro プレビューを含むモデルをテストして得られたもの）に示されているように、Gemini 2.5 Pro プレビューは BigLaw Bench で 85.02% というトップスコアを達成し、この包括的な評価で評価された他のモデルを上回りました。

この最先端の機能は、さまざまな価値の高い法的活動に不可欠です。BigLaw Bench の主な評価タスクでは、Gemini 2.5 Pro プレビュー版の強みが示されました。

• 取引のデュー デリジェンス: Gemini 2.5 Pro プレビューでは、複数の長いサービス契約から重要な条項（譲渡、補償、解除条項など）を抽出して要約する優れた能力が示されました。これにより、時間のかかる手動のドキュメント審査プロセスを大幅に効率化できる可能性があります。
• 取引の構成: このモデルは、複雑な金融オプション（PIPE、引受株式発行、債券発行など）。このモデルは、財務に関する深い専門知識を持たない人でも、この情報を明確かつわかりやすい方法で提示し、すぐに実行できる可能性のあるアクション アイテムを提案するという点で、有望であることが示されました。
• 訴訟文書の作成: 訴訟関連のタスクで評価された Gemini 2.5 Pro プレビュー版は、大量のブリーフィング ドキュメントに基づいて法的ブリーフの詳細な概要を生成する優れた能力を示しました。この機能は、AI が法的議論の展開と構成の初期段階で大きな助けとなる未来を示しています。
• ドキュメントのレビューと分析: さまざまな試験ドキュメント（通話ログ、メール、メモ）のレビューを含む評価では、Gemini 2.5 Pro プレビューがイベントの時系列の概要をまとめる能力に優れていることが明らかになりました。さらに、このモデルは、記録内の重大な矛盾や曖昧さを特定する可能性を示しており、これは徹底的な法的分析の重要な側面です。

これらの評価を通じて、Gemini 2.5 Pro プレビューは、数百ページの資料からなる入力に対して、優れた推論能力を発揮しました。これは、法律業務では一般的なシナリオです。また、これらの資料を使用して、より長い形式の包括的な出力を生成し、より深い分析情報と分析を可能にしました。これらのコア機能は、デュー デリジェンス、レビュー、ユースケースの作成をサポートするために大量のドキュメントを推論する必要がある複雑な法的業務全体で Gemini 2.5 Pro プレビューを活用できる可能性を示しています。

Harvey の応用 AI 部門の責任者である Niko Grupen 氏は、「Harvey は、法律の専門家が最先端のツールを利用できるようにすることに取り組んでいます」と述べています。「BigLaw Bench を通じて Gemini 2.5 Pro プレビュー版を評価した結果、複雑な法的情報を合成する優れた能力が明らかになりました。この分析情報は、将来のプロダクト開発のビジョンを支えるものであり、これらの強みを活かして前例のない効率性を実現し、弁護士がより高度な戦略的業務に専念できるようにすることを目指しています。」

Harvey は、厳格な評価と、Gemini 2.5 Pro プレビューなどの最先端の AI モデルの洞察に満ちた分析に取り組んでおり、法律分野における AI の変革の可能性を示しています。この調査結果は、法律専門家が最も困難なタスクに取り組む方法を再構築する将来のイノベーションへの道を開くものです。

Gemini 2.5 Pro Preview の高度な推論機能と合成機能がアプリケーションにどのように活用できるかについては、Gemini API のドキュメントをご覧いただくか、Google AI Studio でお試しください。

Harvey は、AI の未来を築く野心的なスタートアップに投資し、連携する Google の AI Futures Fund に参加しています。