Scale AIなど、新たなAIベンチマーク「Humanity’s Last Exam」を公開

Scale AIとThe Center for AI Safety(CAIS)は1月24日、新しいAIベンチマーク「Humanity’s Last Exam」を発表した。直訳するなら「人類最後の試験」。「人類の専門的知識の最前線でAIの知識を試す」としている。Scale AIはAIツール、アプリケーションの構築ツールを開発しており、CAISは2022年設立のAI安全性研究組織だ。