跳至正文
Hacker News · AI·· 2 小時前AI 評分58

Transcript Testing:為人工審查撰寫 AI 生成的程式碼測試

Transcript Testing: Helping Humans Verify AI Code

AI 導讀

Andrew 提出 Transcript Testing,一種測試風格,會記錄系統行為的人類可讀逐字稿,並將其與預期逐字稿進行斷言比對,以協助審查者驗證 AI 撰寫的程式碼。他以 Apache DataFusion 一個關於 Parquet Bloom filter pruning 的 PR 為例說明,其中一份 400 行的 AI 生成測試被替換為逐字稿輸出,顯示哪些 filter 和 page 被讀取。他指出這種方法並不新穎,引用 Oracle 的 ORATEST 和 DataFusion 的 sqllogictests,但主張 AI 現在讓逐字稿生成器的成本足夠低廉,可以更頻繁地使用。

來源:Hacker News · AI · andrew.nerdnetworks.org