跳到正文

SciCode(Artificial Analysis 復跑)

Artificial Analysis / 程式設計 · 把物理、化學、生物等科研問題寫成能執行的計算程式碼。

官方評測
在 888news 中參與排名
依據預算不參與排序
上游數據時間待核實
最近成功同步尚未開始採集

它測什麼,怎麼測

取 Artificial Analysis 獨立公佈的 SciCode 的通過率。同一型號按最高推理檔位選代表配置,選擇不看分數。

如何使用這份依據

計分:程式設計領域的科學計算一類。

評測局限與數據署名

題目來自公開資料集,可能存在訓練汙染;題集正在接受公開復核。

數據許可:Artificial Analysis 公開頁面資料;展示須顯著署名並連結來源,遵守其 Terms of Use

成績由 Artificial Analysis 發布,各項原始分數使用不同尺度,不能直接相加;參考名次採用公開的分差標準化規則。