Harvey: BigLaw Bench で Gemini 2.5 Pro プレビュー版の高度な法的推論を検証する

法務業界では、膨大な量の複雑な情報を正確かつ微妙に処理できる AI ソリューションが求められています。従来の AI ベンチマークは、法務実務の現実的な要件を捉えきれないことが多く、価値の高い法務業務を本当に実行できるモデルを特定することが困難です。AI を活用して法務ワークフローを変革することに取り組んでいるダイナミックなスタートアップである Harvey は、実際の法務業務を模倣したタスクで大規模言語モデル（LLM）のパフォーマンスを評価する包括的なフレームワークである BigLaw Bench を開発することで、この問題に対処しました。最近の厳格な評価で、Gemini 2.5 Pro プレビュー版は優れたパフォーマンスを発揮し、主要な法分野での効率性を向上させる優れた可能性を示しました。

Harvey が BigLaw Bench フレームワークを活用して行った最近の評価では、Gemini 2.5 Pro プレビューが、コアな法的推論タスク、特に長い形式の法的入力や出力に関する推論を必要とするタスクで、優れた能力を示していることが明確に示されています。Gemini 2.5 Pro プレビューを含むモデルをそれぞれの API でテストして得られた、Harvey が公開した結果に示されているように、Gemini 2.5 Pro プレビューは BigLaw Bench で 85.02% というトップのスコアを獲得し、この包括的な評価で評価された他のモデルを上回りました。

この先進的な機能は、さまざまな価値の高い法務活動に不可欠です。BigLaw Bench の主要な評価タスクでは、Gemini 2.5 Pro プレビューの強みが示されました。

• 取引デューデリジェンス: Gemini 2.5 Pro プレビューでは、複数の長いサービス契約から重要な条項（譲渡、補償、解除条項など）を抽出して要約する能力が実証されました。これは、時間のかかる手動ドキュメント審査プロセスを大幅に効率化できる可能性を示しています。
• 取引の構造化: 複雑な金融オプション（PIPE、引受株式公開、債券公開）。このモデルは、金融に関する深い専門知識がないユーザーでも、この情報を明確でわかりやすい方法で提示し、直ちに実行できるアクション アイテムを提案する点で有望であることが示されました。
• 訴訟関連の文書作成: 訴訟関連のタスクについて評価したところ、Gemini 2.5 Pro プレビューは、大量のブリーフィング ドキュメントに基づいて法的な要約の詳細な概要を生成できることが明らかになりました。この機能は、AI が法的論拠の開発と整理の初期段階で大幅に役立つ未来を示しています。
• ドキュメントの確認と分析: さまざまなトライアル ドキュメント（通話履歴、メール、メモ）の確認に関する評価では、Gemini 2.5 Pro プレビューがイベントの連続的な要約を作成できることが明らかになりました。さらに、このモデルは、記録内の重大な不整合や曖昧さを特定する可能性を示しました。これは、徹底した法的分析の重要な要素です。

これらの評価において、Gemini 2.5 Pro プレビューは、数百ページに及ぶ資料からなる入力に対して優れた推論能力を示しました。これは、法務業務でよく見られるシナリオです。また、これらの資料を使用して、より長い形式の包括的な出力を生成し、より深い分析情報を得ることもできました。これらのコア機能は、大量のドキュメントの推論を必要とする複雑な法務作業で Gemini 2.5 Pro プレビューを活用し、デューデリジェンス、レビュー、起草のユースケースをサポートする可能性を示しています。

「Harvey は、法律専門家に最先端のツールを提供することに取り組んでいます」と、Harvey の応用 AI 担当ヘッドである Niko Grupen 氏は述べています。「BigLaw Bench による Gemini 2.5 Pro プレビューの評価では、複雑な法律情報を統合する優れた能力が明らかになりました。この分析情報は、今後の製品開発のビジョンを支えています。Google は、これらの強みを活用して前例のない効率性を実現し、弁護士が高度な戦略的業務に集中できるようにすることを目指しています。」

ハーベイ氏の厳格な評価への取り組みと、Gemini 2.5 Pro プレビュー版などの最先端の AI モデルに対する洞察に満ちた分析は、法分野における AI の変革の可能性を示しています。これらの調査結果は、法務担当者が最も負荷の高いタスクに取り組む方法を再構築する将来のイノベーションへの道を開きます。

Gemini 2.5 Pro Preview の高度な推論機能と合成機能が独自のアプリケーションにどのように役立つかについては、Gemini API のドキュメントをご覧ください。また、Google AI Studio で試すことができます。

ハーベイは、Google の AI フューチャーズ ファンドに参加しています。このファンドは、AI の未来を構築する意欲的なスタートアップに投資し、連携しています。