GPT-5.2がEsoBenchで3位を獲得

GPT-5.2 (high)がEsoBenchという、モデルが独自のプログラミング言語を学習・使用する能力を測るベンチマークで3位に入賞しました。EsoBenchは通常の使用を目的としない奇抜な言語を使うため、モデルは実験を重ねて言語の仕組みを学習する必要があります。GPT-5.2の成績は特に優れたものではありませんが、他の有力モデルと肩を並べる結果となりました。

Details

EsoBenchは通常の使用を目的とせず、むしろ奇抜さや芸術性を追求した独自のプログラミング言語を使うベンチマークです。モデルはこの言語について何も知識がないため、実験を重ねながら言語の仕組みを学習していく必要があります。GPT-5.2 (high)はこのEsoBenchで3位に入賞しましたが、特に優れた成績ではありません。OpenAIのモデルがすでにより高い成績を収めていることから、GPT-5.2の3位はそれほど驚くべきものではありません。ただし、他の有力モデルと肩を並べられたことは評価に値するでしょう。また、同ベンチマークに新たにSonnet 4.5やOpus 4.5などのモデルが追加されており、Sonnet 4.5は思考予算の増加によって10ランク上昇するなど、興味深い結果も報告されています。