作者如何發現測試替錯誤的 0.00% 背書
The 0.00% My Tests Enforced and Math Refused
重點導讀
一篇資料文章把重複配對率寫成 0.00%,回歸測試也照著這個數字檢查,讓錯誤內容順利上線。
- 作者重新計算後發現,24 人分成 4 隊時,每次重新分隊至少會有 8 組舊配對重複,因此 0 次重複不可能發生。重新模擬後,歷史感知分隊的平均重複配對數從 13.1 降到 8.6。
- 特定兩人連續同隊的比率則從 5.08% 降到 3.15%。作者也把不同測量拆開,並修改測試,檢查結果是否符合數學下限。這次錯誤是大型語言模型審查時指出的,作者因此主張在自動發布前加入這類檢查。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
The 0.00% My Tests Enforced and Math Refused
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文