45 款已釋出模型全數偏向專家答案，否定 MMLU-Pro 內部錯誤答案鍵
45 of 45 published models side with the experts, not MMLU-Pro's answer key, on its inherited MMLU errors
重點導讀
MMLU-Pro 的 45 款已釋出模型在 46 個關鍵題目中，均偏向專家答案而非官方答案鍵。
\n- 模型偏好：在 46 題中，模型共選擇專家答案 1,041 次（佔 50.3%），官方答案鍵 283 次（13.7%），其餘為其他選項或無效答案。
AI 伴隨問答
針對這篇報導有疑問？可直接點選快捷問題或向 AI 追問背景脈絡與技術細節：
信源出處dev.to
45 of 45 published models side with the experts, not MMLU-Pro's answer key, on its inherited MMLU errors
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論，請前往原始網站。
來源： Dev.to Top Tech (dev.to)
開啟原文