NVIDIA 研究人員認為,AI 上下文視窗不必一味變大
Nvidia researchers argue huge AI context windows are a dead end
重點導讀
語言模型的上下文視窗就像工作時能攤開來看的資料,近年變得越來越大,現在有模型一次能處理約 100 萬個 token,足以放進《戰爭與和平》這本小說。
- NVIDIA 研究團隊認為,視窗做得這麼大,常常既用不完又很花錢。
- 在不少測試中,定期整理摘要、需要時再找相關資料,效果差不多。這表示模型要記住很多內容時,不一定得把所有資料一次塞進去。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處the-decoder.com
Nvidia researchers argue huge AI context windows are a dead end
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: The Decoder (the-decoder.com)
開啟原文