重點導讀
ARC-AGI 不同版本的測試結果和每題費用,能讓人看出模型在各項測試中的表現。
- ARC Prize 分享了 Mercury 3 Preview 的評測數字:ARC-AGI-3 在 provider adapter 下為 0.2%、費用 $299,在 standard 下為 0.1%、費用 $333。
- ARC-AGI-2 為 61.8%、每題 $0.06。
- ARC-AGI-1 為 88.5%、每題 $0.03。ARC Prize 也表示,這是他們評測的第一個擴散模型,速度最高可達每秒 1,743 tokens。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
ARC Prize@arcprize
·5 天前
Mercury 3 Preview from @_inception_ai on ARC-AGI (Verified):
- ARC-AGI-3: 0.2%, $299 (provider adapter), 0.1%, $333 (standard)
- ARC-AGI-2: 61.8%, $0.06/task
- ARC-AGI-1: 88.5%, $0.03/task
It is the first diffusion model we've evaluated, delivering up to 1,743 tokens/second. https://t.co/Wqscy5zUrl
推文來源 · X (Twitter)在 X 參與討論