跳到正文

#前沿模型訓練成本

RSS
今日 0 則
10月10日週六
  1. No Priors🎙️ Podcast85

    Beam:美國最強開放模型,專訪 Reflection AI 共同創辦人暨執行長 Misha Laskin

    Reflection AI 共同創辦人暨執行長 Misha Laskin 表示,公司過去 12 個月從零打造了一座前沿實驗室——團隊從一年前約 30 人成長到現在約 300 人——並推出了 Beam,一個 500B 引數的開放權重模型(活躍引數 23B),以 6,000 顆 GB300 訓練數週完成,強化學習階段則動用超過 10,000 顆 GB300、跑了四週。本集節目主要是一份實作紀錄:在美國打造前沿開放模型需要什麼、開放與閉源模型各自如何商業化,以及 Laskin 為何認為開放是更安全的預設值。標題的「偉大的美國開放模型」框架說得通,但視角偏窄:整場對話橫跨訓練成本膨脹、中國開放權重模型