llama.cpp b12121 版本更新:修正量化 KV 快取狀態複製錯誤
b12121
重點導讀
llama.cpp b12121 版本更新修正了量化 KV 快取的狀態複製錯誤,提升多平臺執行穩定性。
- 修正內容:針對 q8_0、q4_0 等量化型別,改用
ggml_type_size() * ggml_blck_size()計算元素數量,確保整塊複製。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處github.com
b12121
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: llama.cpp Releases (github.com)
開啟原文