リーガルAIは2025年に、もはや任意の選択肢ではなくなりました。問われているのは、貴社の事務所や部門がAIを導入するかどうかではなく、導入したAIが制裁申立て、弁護過誤保険の更新、PCAOBの検査、あるいは弁護士会への懲戒請求に耐えられるかどうかです。Veriprajnaのアプローチは、AIベンダースタックと、貴社の事務所や部門の実際の運用を規律するプロフェッショナルとしての義務との間に位置するよう設計された、検証と統合のレイヤーを構築することです。
RAGが解決していないハルシネーション発生率
ハルシネーションの問題は、検索拡張生成(RAG)によって解決されていません。スタンフォード大学とイェール大学は、これまでで最も厳密な独立系の研究において、主要なリーガルリサーチツールを検証しました—— Magesh et al.。掲載誌は Journal of Empirical Legal Studies、2025年。これらは例外的なケースではなく、標準的なリーガルリサーチの質問に対して測定された発生率です。
| ツール | 測定されたハルシネーション発生率 |
|---|---|
| Lexis+ AI | クエリの17%超 |
| Westlaw AI-Assisted Research | 約33% |
| GPT-4 | 43% |
ほとんどのベンダーが次の判例の後に追加した検証レイヤー—— Mata v. Avianca ——は、それ自体がLLMベースであり、判例が存在することを正しく特定できても、判示事項の微妙な誤認を見逃す可能性があります。これは、当社の リーガルAI向けの引用強制型GraphRAGに関する研究 が解消するために構築された失敗モードです。
検証が失敗するとき:Johnson v. Dunn
Johnson v. Dunnは、アラバマ州北部地区連邦地方裁判所で、 2025年7月に、検証が失敗するとどうなるかを示しました。裁判所は次のことを行いました。
- 問題の弁護士を、依頼人の代理から失格とした。
- 当該弁護士が資格を有するすべての州の弁護士会規制当局に通知するよう書記官に指示した(当社が検討した、複数州にまたがる帰属の問題については、次を参照: 決定論的な責任帰属に関するホワイトペーパー)。
- その意見書をFederal Supplement(連邦補遺判例集)に掲載するよう命じた。
これは5,000ドルの罰金ではなく、キャリアを左右するレベルの結果です。
複数管轄区域にわたる倫理コンプライアンス
倫理ガイダンスは寄せ集めの状態にあり、急速に厳格化しています。現在、300人を超える連邦裁判官がAIの開示と引用の証明を求める常設命令またはローカルルールを設けており、全国統一の基準は存在しません。12の管轄区域で業務を行う事務所には、単一のポリシーではなくコンプライアンスマトリックスが必要です——そして、ほとんどのリーガルAIベンダーはそれを提供していません。
| 発行主体 | 意見書 | 日付 | 要件 |
|---|---|---|---|
| ABA | 正式意見512号 | 2024年7月 | 生成AIの利用に関する能力、守秘義務、コミュニケーション、および合理的な報酬をめぐる基本的な義務 |
| テキサス州 | 意見705号 | 2025年2月 | AIが生成した成果物に対する人間による監督 |
| フロリダ州 | 意見24-1号 | — | AIが請求に与える影響の開示 |
| オレゴン州 | 2025-205 | 2025年 | クライアントのデータをオープンなAIモデルに投入する前の、十分な説明に基づくクライアントの同意 |
無料の生成AIレビュー後のeディスカバリ品質保証
eディスカバリは価格が見直されつつあり、品質保証の問題は未解決のままです。RelativityとEverlawが生成AI機能を無料化したことで、一次レビューと秘匿特権の検出はコモディティ化しました。しかし、シードセット検証の方法論——弁護可能な TAR 2.0 プロダクションの基盤であり、その根拠は Federal Rule of Civil Procedure 26(b)(1) です——は、生成AI支援レビューにはそのまま移行できません。
レビューコストが一桁下がると比例性(プロポーショナリティ)の主張は変化しますが、生成AIの出力について再現率と適合率を測定するための品質保証フレームワークはいまだ未成熟です。訴訟サポートチームが、 Rule 26(f) の協議(ミート・アンド・コンファー)での異議申立てに耐えうる検証プロトコルなしにaiRやEverlawAIを運用している場合、そのコスト削減には、最悪のタイミングで表面化するディスカバリのリスクが伴います。
契約ライフサイクル管理(CLM)の統合ギャップ
契約ライフサイクル管理には、それ独自の統合ギャップが存在します。 Ironclad、Icertis、Sirion、Agiloft はいずれも Forrester Wave 2025年第1四半期 でリーダーの地位を獲得しました。しかし、CLMを導入するすべての企業法務部門は、それを案件管理、電子請求、規制リスク監視、および文書管理システムと接続しなければなりません。
これらの統合は、CLMベンダーが範囲を定めるものの、責任を負わないカスタム作業です。その失敗モードは製品の欠陥ではなく、義務がシステムの間の隙間から抜け落ちる原因となるデータ配管(データ連携)のギャップです。
法律以外のプロフェッショナルサービス:監査、税務、コンサルティング
法律以外のプロフェッショナルサービスも、同様の摩擦に直面しています。共通しているのは、あらゆるプロフェッショナルサービスの導入において、AIベンダーが提供しない検証と文書化のレイヤーが必要だという点です。
- 監査。 PCAOBの2025年の検査重点項目には、監査業務におけるAIの利用が明示的に含まれています。検査官はBig 4と面談し、AIツールのデモンストレーションを視察し、AIが生成した監査証拠が、次の基準の下で職業的懐疑心の要件を満たしているかどうかを評価しています。すなわち AS 1105 および ISQM 1です。
- 税務。 税務アドバイザリー事務所——その業務の根拠は IRS Circular 230 ——は、人間が作成した税務意見書に必要とされるのと同じデューデリジェンス文書を、AI支援による税務意見書についても必要とします。
- コンサルティング。 クライアント業務にAIを導入する経営コンサルティング会社は、独立性、守秘義務、利益相反チェックの要件に直面しますが、これらは既製のツールでは対応できません。
Veriprajnaが構築するもの
当社のアプローチは、AIベンダースタックと、貴社の事務所や部門の実際の運用を規律するプロフェッショナルとしての義務との間に位置するよう設計された、検証と統合のレイヤーを構築することです。各エンゲージメントは、5つの領域にわたる成果物を生み出すよう範囲設定されます。貴社がすでにライセンスを保有しているツールについては当社はベンダー中立を保ちますが、どのベンダーもカバーしない検証、コンプライアンス、統合の作業については明確な方針を持っています。
- 引用の検証 は、決定論的であるよう設計されており、最初のLLMをチェックするもう一つのLLMではありません——次をご覧ください: 決定論的な引用検証の実働デモ。
- 複数州にわたる倫理コンプライアンスマトリックス は、ABA、州弁護士会、および裁判所固有のAIルールを事務所全体のポリシーに対応付けます。
- eディスカバリ品質保証ハーネス は、TAR 2.0のシードセットと同じ統計的厳密性で、生成AIのレビュー出力を検証します。
- CLM統合パイプライン は、次のベンダー更新で壊れるようなカスタムの接続コードを用いることなく、契約インテリジェンスを案件管理、請求、規制リスクのシステムに接続します。
- PCAOB対応の文書 は、AI支援による監査手続きのためのものです。
主なポイント
- リーガルAIの導入はすでに定着しています——Harvey、CoCounsel Legal、Relativity、Everlawはすでに本番運用されています——したがって、現実のリスクは、その導入が制裁申立て、弁護過誤保険の更新、PCAOBの検査、あるいは弁護士会への懲戒請求に耐えられるかどうかです。
- RAGはハルシネーションを解決していません。測定された発生率は17%超(Lexis+ AI)、約33%(Westlaw)、43%(GPT-4)に及び、Mata 以降のLLM検証ツールでも、判示事項の誤認を依然として見逃しています。
- Johnson v. Dunn (アラバマ州北部地区、2025年7月)は、事態を代理資格の剥奪と複数州の弁護士会への付託にまでエスカレートさせました——キャリアを左右するレベルの結果です。
- ABA 512、テキサス705、フロリダ24-1、オレゴン2025-205、そして300人を超える連邦裁判官の命令は、単一のポリシーではなくコンプライアンスマトリックスを要求しています。
- 無料の生成AIによるeディスカバリ、TAR 2.0の検証ギャップ、CLM統合、そしてPCAOB/IRS Circular 230/コンサルティングの義務は、いずれもどのAIベンダーも提供しない検証と文書化のレイヤーを必要とします。
よくあるご質問
Harvey、CoCounsel Legal、あるいはLexis+ AIが、私の業務分野において実際にハルシネーションを防止できるかどうかを、どのように評価すればよいですか?
ベンダーのデモ用データセットではなく、ご自身のクエリで管理された評価を実施してください。スタンフォード大学の研究(Magesh et al.、JELS 2025)では、標準化されたリーガルクエリにおいて、Lexis+ AIで17%、Westlaw AIで33%のハルシネーション発生率が確認されました。貴社の業務固有の発生率は異なる可能性があります。当社は、実際のリサーチパターンに基づいて引用の正確性、判示事項の特徴づけ、および管轄区域上の正確性を検証する評価ハーネスを構築し、汎用的なベンチマークではなく貴社のワークフローを反映した比較を提供します。
AIが生成した架空の引用を提出したことで、弁護士が事件の代理資格を剥奪されることはありますか?
はい。Johnson v. Dunn(アラバマ州北部地区、2025年7月)では、裁判所は問題の弁護士を、事件の残りの期間にわたり依頼人の代理から失格とし、当該弁護士が資格を有するすべての州の弁護士会規制当局に通知するよう書記官に指示し、その意見書をFederal Supplementに掲載するよう命じました。これは、Mata v. Aviancaにおける5,000ドルの制裁をはるかに超えるものでした。現在までに世界で230件を超える案件がAIによる架空の引用に関与しており、裁判所は制裁を強化しています。
弁護士会の倫理ガイダンスが管轄区域ごとに異なる中で、事務所全体のAIポリシーをどのように構築すればよいですか?
必要なのは単一のポリシー文書ではなく、コンプライアンスマトリックスです。ABA正式意見512号が基準を定めていますが、テキサス意見705号、フロリダ24-1、オレゴン2025-205、そしてニューヨークの各意見は、監督、請求の開示、クライアントの同意、守秘義務をめぐる管轄区域固有の要件をそれぞれ追加しています。300人を超える連邦裁判官が独自の常設命令を有しています。当社は、各義務を特定の事務所ワークフローに対応付け、新たな意見が発行されるたびに更新される複数管轄区域のマトリックスを構築するため、貴社のポリシーは四半期ごとの書き直しなしに最新の状態を保ちます。
生成AI支援によるeディスカバリの品質保証を、TAR 2.0と同じ厳密性でどのように実施すればよいですか?
TAR 2.0は、測定可能な再現率と適合率を伴うシードセット検証に依拠していました。生成AIレビュー(Relativity aiR、Everlaw AI)は、同じ統計的フレームワークに対応しない要約、概念クラスタリング、秘匿特権の検出を使用します。当社は、生成AIのレビュー出力をサンプリングし、層化サンプルで人間によるレビューとの一致率を測定し、比例性と網羅性に関する規則26(f)の協議での異議申立てに耐えうる弁護可能性の文書を作成する品質保証ハーネスを構築します。
弁護過誤保険の引受業者は、法律事務所のAIリスク管理体制において何を確認したいと考えていますか?
保険会社は更新申込書にAI固有の質問を追加しています。彼らが求めるのは、書面によるAI利用規程、提出または納品前のAI生成成果物に対する必須の人間によるレビュー、引用検証の手続き、クライアント情報が学習データに漏洩するのを防ぐデータ取り扱い管理、そしてどのAIツールがどのユースケースで承認されているかの記録という証拠です。当社は、保険会社の質問票と、その基礎にある弁護士会の倫理義務の両方を満たす管理フレームワークの構築と文書成果物の作成を支援します。
私たちが欧州の拠点で導入するリーガルAIツールにとって、EU AI法(EU AI Act)は何を意味しますか?
法律サービスで使用されるAIシステムは、EU AI法の高リスクカテゴリーに該当します。全面適用は2026年8月2日に設定されていましたが、整合規格の策定を待って、そのスケジュールは最も遅くて2027年12月まで後ろ倒しになる可能性があります。プロバイダーおよび導入者は、適合性評価、リスク管理システム、人間による監督、市販後モニタリングを維持しなければなりません。AIリテラシーの義務は2025年2月以降すでに執行可能となっており、最大3,500万ユーロまたは全世界売上高の7%の罰則が科されます。複数拠点を持つ事務所は、期限を待つのではなく、今すぐすべてのAIツールをこれらの要件に照らして評価する必要があります。
PCAOBは検査においてAIが生成した監査証拠をどのように扱いますか?
PCAOBの2025年の検査重点項目は、監査業務におけるAIの利用を明示的に指摘しています。検査官は事務所と面談し、AIツールのデモンストレーションを視察し、AIが生成した証拠がAS 1105の下での職業的懐疑心の要件を満たしているかどうかを評価しています。核心的な問いは、データセットにAIを適用する監査人が、クライアントの説明に対して適用するのと同じ懐疑心を発揮しているかどうかです。当社は、AI支援による手続きを、入力データからモデル出力を経て監査人の判断まで追跡できる文書フレームワークを、検査チームが基礎となるモデルアーキテクチャを理解する必要なく追える形式で構築します。
確かな信頼のもとに、AIを構築する。
次世代のエンタープライズAI構築において豊富な経験を持つチームと、ぜひご一緒ください。信頼できるAI戦略の設計・構築・導入を、私たちがお手伝いします。
Veriprajna ディープテック・コンサルティング は、ヘルスケア・金融・規制対応分野における安全性重視のAIシステム構築を専門としています。当社のアーキテクチャは確立されたプロトコルに照らして検証され、包括的なコンプライアンス文書を備えています。