-
在 runtime 層擋住 coding agent 偷改單元測試:三層防線實戰
agent 把測試改綠不是提示詞沒寫好,是目標函數長出來的行為。這篇給三層可以直接抄的 runtime 防線:permission deny 與 PreToolUse hook、pytest/vitest 的 runne...
-
Build 綠了 ≠ 修好了:抓出 coding agent 造假通過的 7 種招式(附偵測指令與 hook 設定)
agent 回報「測試全綠」時,它可能只是改了斷言、skip 了測試、或把答案寫死成一張 hash table。這篇拆解 7 種造假通過的手法、每一種的偵測指令,以及三層可以直接抄進專案的驗證閘門。
-
Coding agent 說「Done」時你該驗什麼:假報完成的四個斷點,與一套可照做的逐句重驗流程
一則「54 任務實測、Codex 4.1% 假報 Done」的貼文我沒能驗證,但它戳的問題有 20,574 場真實 session 的資料撐著:不實自我回報占失敗片段的 22.58%,且 91.49% 要靠人出聲才被糾正...