การทดสอบทรานสคริปต์: การเขียนชุดทดสอบโค้ดที่สร้างโดย AI เพื่อให้มนุษย์ตรวจทาน

Andrew เสนอ Transcript Testing ซึ่งเป็นรูปแบบการทดสอบที่บันทึกทรานสคริปต์ของพฤติกรรมระบบที่มนุษย์อ่านได้ และตรวจสอบเทียบกับทรานสคริปต์ที่คาดหวัง เพื่อช่วยให้ผู้ตรวจทานยืนยันโค้ดที่ AI เขียนขึ้น เขาอธิบายด้วย PR ของ Apache DataFusion เกี่ยวกับการตัดทิ้ง Bloom filter ใน Parquet ซึ่งชุดทดสอบที่ AI สร้างขึ้นยาว 400 บรรทัดถูกแทนที่ด้วยเอาต์พุตทรานสคริปต์ที่แสดงว่ามีการอ่านฟิลเตอร์และเพจใดบ้าง เขาระบุว่าแนวทางนี้ไม่ใช่เรื่องใหม่ โดยอ้างถึง ORATEST ของ Oracle และ sqllogictests ของ DataFusion แต่โต้แย้งว่าปัจจุบัน AI ทำให้ตัวสร้างทรานสคริปต์มีต้นทุนต่ำพอที่จะใช้งานได้บ่อยขึ้นมาก