OpenAI、ChatGPTの生活支援を測るLifeVal

OpenAIは、日常生活の課題をChatGPTがどの程度支援できるか測る「LifeVal」を紹介しました。助言を返すだけでなく、利用者の目的達成に向けて行動を支援する能力を評価する考え方です。

想定する課題には、保育サービスや行政手続きの利用、予算作成、学校の準備、レシピ調整、食料品注文、運動計画などが含まれます。ChatGPTを実用的な個人アシスタントに近づける狙いがあります。

OpenAIの説明は、評価したい領域の例を示しています。ベンチマークの問題数、採点基準、第三者検証や比較結果などの詳細は、記事で確認できる範囲では限られています。

生活に関わる支援を評価するには、回答の正しさだけでなく、手続きの完了性や安全性も重要です。LifeValが具体的な測定方法を公開すれば、日常タスクでのAIの実力を比較する材料になります。