幻覚の軽減は素晴らしいですが、これらのベンチマークのいくつかは、リンゴからリンゴまで比較的小さな改善のように見えます。 Aider Polyglotでは、考えずに5は4oより0.9ポイント高い。 MMMUでは、2.2oより4ポイント高い。
Carl Vellotti
Carl Vellotti8月8日 01:12
GPT-5 ベンチマークが下がったばかりです – コーディングがはるかに上手 – 人間の博士号よりも高い視覚的推論 – 幻覚の大幅な減少 これらのベンチマークがどのように機能するか見てみましょうが、クレイジーに見えます
まだまだ使ってワクワク!
3K