Hacker News · AI·· 2 小时前AI 评分58
转录测试:编写供人工审查的 AI 生成代码测试
Transcript Testing: Helping Humans Verify AI Code
AI 导读
Andrew 提出 Transcript Testing,一种测试风格:记录系统行为的可读转录,并将其与预期转录进行断言,以帮助审查者验证 AI 编写的代码。他以 Apache DataFusion 中关于 Parquet Bloom filter pruning 的 PR 为例说明:一个 400 行的 AI 生成测试被转录输出取代,该输出显示了读取了哪些过滤器和页面。他指出该方法并不新颖,并引用了 Oracle 的 ORATEST 和 DataFusion 的 sqllogictests,但认为 AI 现在使转录生成器足够廉价,可以更频繁地使用。
来源:Hacker News · AI · andrew.nerdnetworks.org