OpenAIの法律特化型AI、主要評価で首位

評価結果

LAB-AAで満点率20.8%
GPT-6.2 Astraを上回る成績
出力トークン54%少なく達成
重大な幻覚は1件当たり0.03

提供と改善

Enterprise顧客が申請可能
API利用も申請受付
検索索引は3.1億超URL
米国判例の99.9%超を網羅
詳細を読む

OpenAIは11月17日、法律業務向けモデル構成「Astra for Law」の更新版を発表しました。Harveyの法務エージェント評価LAB-AAで首位となり、ChatGPT Enterpriseの全顧客がTrusted Access Programを通じて利用を申請できます。API利用も申請対象です。

Artificial Analysisが実施したLAB-AAの120課題では、全要件を満たした割合が20.8%で、GPT-6.2 Astraの15.0%や、非OpenAI勢で最高だったMuse Wonder Fullの13.1%を上回りました。課題当たりの出力は平均約6万4000トークンで、Muse Wonder Fullの約13万9000トークンより54%少ないとしています。

同評価で、重大な幻覚は課題当たり0.03件とGPT-6に並ぶ最少水準でした。また、弁護士が設計に関わったVals AIの法律調査評価では、11月16日時点で208問中112問に満点を取り、9月の約46%から53.8%に上昇したとOpenAIは説明しています。

Astra for LawはGPT-6.2 Astraを基盤に、法律情報の検索索引と調査・論証・執筆向けの指示を組み合わせたモデル構成です。検索索引は9月以降に34%拡大し、3億1000万超のURLを収録、公開済みの米国先例判例の99.9%超をカバーするとしています。

利用を希望するChatGPT Enterprise顧客は管理コンソールから申請でき、対象顧客はChatGPTで「gpt-6.2-astra-law」を選択します。APIで自社ツールに組み込む場合も申請が必要で、利用可能範囲はTrusted Access Programによって提供されます。