PyTorch Dynamo 加快檢查張量是否共用記憶體
trunk/e181a69757711efb63bb892a6144d162d745d5e9: [dynamo] Speed up disjoint input storage guards (#205789)
重點導讀
PyTorch Dynamo 編譯程式時,會檢查多個張量有沒有用到重疊的記憶體;原本就算 3,103 個張量彼此沒有重疊,也可能要做超過 481 萬次比較。
- 這次修改讓系統先按記憶體位置排序,再逐一檢查相鄰區段。
- 遇到不適用的情況,仍會使用原本的檢查方式。在一個使用 3,103 個區塊的測試中,檢查時間從 86.75 毫秒降到 4.90 毫秒,讓編譯後的更新工作更快。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處github.com
trunk/e181a69757711efb63bb892a6144d162d745d5e9: [dynamo] Speed up disjoint input storage guards (#205789)
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: PyTorch Core Releases (github.com)
開啟原文