程式碼加行號最多多花 42% token,作者比較五種格式
Line numbers made the code I send to an LLM 42% more expensive
重點導讀
AI 助理要指出程式碼哪一行有問題時,加上行號很方便,但送出的文字也會變多。
- 作者用 Python 3.13 標準函式庫的 131 個檔案比較五種格式,發現常見的 cat -n 排版會讓程式碼多出 42.4% 的 token。
- 行號前補空格也會增加成本。若不需要整份檔案的行號,可以只替相關片段編號,或用「行號加 Tab」的格式,降低額外用量。作者使用 OpenAI 的 o200k_base tokenizer 計算,沒有測試行號是否能提升回答準確度。
- 其他模型的實際比例也可能不同。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
Line numbers made the code I send to an LLM 42% more expensive
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文