การทดสอบ (A/B testing)
การทดสอบ A/B ตอบคำถามว่า "พรอมต์ใหม่ดีกว่าจริงหรือไม่" ด้วยข้อมูลแทนความรู้สึก: สายเรียกเข้าจะถูกแบ่งระหว่างเวอร์ชันของเอเจนต์ แต่ละสายจะถูกประเมินตามปกติ และคุณเปรียบเทียบอัตราความสำเร็จของแต่ละเวอร์ชัน
มีสองส่วน:
- รายเอเจนต์ — กำหนดค่าและปรับแต่งการทดสอบในตัวสร้างของเอเจนต์แต่ละราย ที่แท็บ A/B (
/dashboard/agents/<id>?tab=variants) ซึ่งเป็นที่ที่คุณสร้างเวอร์ชันและเปิดการทดสอบแบบแบ่งกลุ่ม - ภาพรวมข้ามเอเจนต์ — หน้า การทดลอง (
/dashboard/experimentsภายใต้คุณภาพและการทดสอบ) รวบรวมการทดสอบของเอเจนต์ทุกตัวไว้ในตารางเดียว
ตั้งค่าการทดสอบ
จากหน้าการทดลอง คลิก ตั้งค่าการทดสอบ A/B แล้วเลือกเอเจนต์ — คุณจะเข้าสู่แท็บ A/B ของเอเจนต์นั้น ซึ่งคุณสามารถสร้างการกำหนดค่าเวอร์ชันต่างๆ (หนึ่งเวอร์ชันถูกทำเครื่องหมายเป็น กลุ่มควบคุม) และเปิดใช้การทดสอบแบบแบ่งกลุ่ม ดูรายละเอียดเกี่ยวกับตัวสร้างได้ที่สร้างเอเจนต์
อ่านภาพรวม
สำหรับเอเจนต์แต่ละตัวที่มีการทดสอบ ตารางการทดลองจะแสดง:
- สถานะ — ใช้งานอยู่ (เปิดการทดสอบแบบแบ่งกลุ่ม) หรือหยุดชั่วคราว
- เวอร์ชัน — ทุกเวอร์ชันในรูปแบบชิป พร้อมป้ายกำกับกลุ่มควบคุม
- นำอยู่ — เวอร์ชันที่มีอัตราความสำเร็จดีที่สุดจนถึงขณะนี้ พร้อมเปอร์เซ็นต์ จนกว่าเวอร์ชันต่างๆ จะมีสายที่ได้รับการประเมิน จะแสดงเป็นยังมีข้อมูลไม่เพียงพอ — อย่าเพิ่งตัดสินผู้ชนะจากสายเพียงไม่กี่สาย
- สาย — จำนวนสายทั้งหมดของเวอร์ชันในการทดสอบ
เอเจนต์ที่ไม่มีการทดสอบจะแสดงอยู่ด้านล่างเป็นตัวเลือกแบบคลิกครั้งเดียวเพื่อเริ่มการทดสอบ การคลิกแถวใดก็ได้จะไปยังแท็บ A/B ของเอเจนต์นั้นเพื่อปรับแต่งหรือสรุปการทดสอบ