CloudMounter 和 rclone 讀取 6.5 GB S3 資料,哪個比較快?
I Benchmarked CloudMounter Against rclone on 6.5 GB of S3 Data
重點導讀
把 S3 資料夾掛成電腦上的磁碟,第一次讀取可能很慢,尤其是資料由許多小檔案組成時。
- 作者在同一臺 Mac 和同一個網路上,比較 CloudMounter 與 rclone,並用 SHA-256 檢查讀到的檔案是否正確。CloudMounter 第一次讀取 5 GB 檔案花了 2 分 18 秒,第二次只要 3.1 秒。
- rclone 加上
--use-server-modtime後,列出 10,000 個檔案的時間從約 8 分鐘降到 3.3 秒。實測提醒,讀取快取中的資料和第一次從雲端下載差很多。 - 若要訓練模型,最好先把資料同步到電腦,或提早釘選資料夾。
AI 伴隨問答
針對這篇報導有疑問?可直接點選快捷問題或向 AI 追問背景脈絡與技術細節:
信源出處dev.to
I Benchmarked CloudMounter Against rclone on 6.5 GB of S3 Data
本文為 888news 精選之重點導讀。若需閱讀作者完整原文、技術細節與官方討論,請前往原始網站。
來源: Dev.to Top Tech (dev.to)
開啟原文