MultiO 用 $0.87 比較 5 個 AI 模型,並公開每筆花費
We ran a 5-model, 24-question study for $0.87 — and published the receipt
重點導讀
比較多個 AI 模型時,常常不知道錢花在哪裡。MultiO 用同一組 24 個問題詢問 GPT、Claude、Gemini、Grok 和 Llama,再逐題檢視它們的答案有多大差異,並公開收據。整場研究共花 $0.87;其中,判讀模型答案差異的費用超過回答問題本身的 3 倍。研究發現,模型答案有 52 處明顯不同,只有 24 題中的 8 題答案大致一致。把同一模型重新測試後,它沒有改變判斷,顯示差異出在不同模型之間。這提醒大家,比較模型時,花錢較多的部分可能是看懂它們哪裡意見不同;公開每筆費用,也能讓別人檢查研究怎麼做、錢怎麼花。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
We ran a 5-model, 24-question study for $0.87 — and published the receipt
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文