作者測試 RAG 檢索器能否找到沒見過的新詞
I tested my RAG retriever on terms it hadn't seen
重點導讀
RAG 檢索器找到更多詞,不代表每次都找對意思;把不合語境的詞放進提示詞,模型也可能照著用。
- 作者用 36 篇自製短文測試固定的檢索規則,其中 6 篇不該帶入任何詞彙。
- 加入文字正規化和模糊比對後,檢索器找到 39 次必要詞彙中的 34 次,但也在 6 篇不需詞彙的短文中都帶入了錯誤詞義。
- 較長的片語搜尋則找到原本短搜尋漏掉的 10 次詞彙。
- 這些結果來自小型合成測試,作者提醒,還需要用真實文章檢查錯誤比對出現的情況。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
I tested my RAG retriever on terms it hadn't seen
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文