Kiểm thử bản ghi: Viết kiểm thử mã do AI tạo để con người đánh giá

Andrew đề xuất Kiểm thử bản ghi (Transcript Testing), một phong cách kiểm thử ghi lại bản ghi hành vi hệ thống mà con người có thể đọc được và đối chiếu với bản ghi mong đợi, nhằm giúp người đánh giá xác minh mã do AI viết. Ông minh họa bằng một PR của Apache DataFusion về cắt tỉa bộ lọc Bloom trên Parquet, trong đó một bài kiểm thử do AI tạo dài 400 dòng được thay bằng đầu ra bản ghi cho thấy những bộ lọc và trang nào đã được đọc. Ông lưu ý cách tiếp cận này không mới, dẫn chứng ORATEST của Oracle và sqllogictests của DataFusion, nhưng lập luận rằng AI hiện nay khiến các trình tạo bản ghi trở nên rẻ đến mức có thể dùng thường xuyên hơn nhiều.