跳到正文
熱點事件持續更新

llama.cpp v0.9.0 release

1 篇報導1 個報導來源2 小時前更新

先了解這件事

重點綜述

llama.cpp v0.9.0 正式發布,新增 FP8 E4M3 量化、flash_attn_ext_rows 等多項功能,並擴充多模態與音訊支援。

  • 量化:加入 OCP FP8 E4M3 tensor type,提供轉換輔助,提升量化模型效能。

根據報導自動生成 · 1 小時前更新

報導時間線

沿著報導,瞭解事件的不同面向。

11月4日
  1. llama.cpp Releases精選
    llama.cpp v0.9.0 發布:新增 FP8 E4M3 量化與多序列 KV 快取最佳化

    llama.cpp v0.9.0 正式發布,新增 FP8 E4M3 量化、flash_attn_ext_rows 等多項功能,並擴充多模態與音訊支援。 - 量化:加入 OCP FP8 E4M3 tensor type,提供轉換輔助,提升量化模型效能。

本事件熱度趨勢

還沒有足夠的連續觀測資料,暫不繪製趨勢。

讀者討論

針對此事件的各方觀點與即時反饋