作者不再輕信 AI 程式開發說法,改以實測驗證
作者啟動 LGTM(Let’s Get the Measurements)系列,接下來 4 週將實際測試 AI 程式開發工具的各種說法,公開呈現測試結果、失敗案例與資料。 測試方式:每集開始前先訂出通過與失敗標準,再使用真實工具、帳號與執行結果;文章免費,完整資料集、逐字稿與指令碼則提供給 Patreon 會員。 系列安排:共 8 集,每週二、週五於達卡時間 19:00發布;主題包括測試 Copilot 是否會服從程式碼註解、README 與 GitHub issue 中的惡意指令,以及比較 Copilot、ChatGPT、Claude、Gemini 在相同規格與測試套件下的表現。 首集測試:作者在小型帳務應用程式的註解、README 與 issue 中埋入指令,讓 Copilot 執行重新命名與 JSON 旗標調整,並進行 5 次測試;作者表示首集當天 19:00發布。