การทดสอบ (A/B testing)

เรียกใช้การกำหนดค่าเอเจนต์สองแบบควบคู่กันบนสายจริง และให้ อัตราความสำเร็จ เลือกผู้ชนะ

การทดสอบ A/B ตอบคำถามว่า "พรอมต์ใหม่ดีกว่าจริงหรือไม่" ด้วยข้อมูลแทนความรู้สึก: สายเรียกเข้าจะถูกแบ่งระหว่างเวอร์ชันของเอเจนต์ แต่ละสายจะถูกประเมินตามปกติ และคุณเปรียบเทียบอัตราความสำเร็จของแต่ละเวอร์ชัน

มีสองส่วน:

• รายเอเจนต์ — กำหนดค่าและปรับแต่งการทดสอบในตัวสร้างของเอเจนต์แต่ละราย ที่แท็บ A/B (/dashboard/agents/<id>?tab=variants) ซึ่งเป็นที่ที่คุณสร้างเวอร์ชันและเปิดการทดสอบแบบแบ่งกลุ่ม
• ภาพรวมข้ามเอเจนต์ — หน้า การทดลอง (/dashboard/experiments ภายใต้คุณภาพและการทดสอบ) รวบรวมการทดสอบของเอเจนต์ทุกตัวไว้ในตารางเดียว

ตั้งค่าการทดสอบ#

จากหน้าการทดลอง คลิก ตั้งค่าการทดสอบ A/B แล้วเลือกเอเจนต์ — คุณจะเข้าสู่แท็บ A/B ของเอเจนต์นั้น ซึ่งคุณสามารถสร้างการกำหนดค่าเวอร์ชันต่างๆ (หนึ่งเวอร์ชันถูกทำเครื่องหมายเป็น กลุ่มควบคุม) และเปิดใช้การทดสอบแบบแบ่งกลุ่ม ดูรายละเอียดเกี่ยวกับตัวสร้างได้ที่สร้างเอเจนต์

อ่านภาพรวม#

สำหรับเอเจนต์แต่ละตัวที่มีการทดสอบ ตารางการทดลองจะแสดง:

• สถานะ — ใช้งานอยู่ (เปิดการทดสอบแบบแบ่งกลุ่ม) หรือหยุดชั่วคราว
• เวอร์ชัน — ทุกเวอร์ชันในรูปแบบชิป พร้อมป้ายกำกับกลุ่มควบคุม
• นำอยู่ — เวอร์ชันที่มีอัตราความสำเร็จดีที่สุดจนถึงขณะนี้ พร้อมเปอร์เซ็นต์ จนกว่าเวอร์ชันต่างๆ จะมีสายที่ได้รับการประเมิน จะแสดงเป็นยังมีข้อมูลไม่เพียงพอ — อย่าเพิ่งตัดสินผู้ชนะจากสายเพียงไม่กี่สาย
• สาย — จำนวนสายทั้งหมดของเวอร์ชันในการทดสอบ

เอเจนต์ที่ไม่มีการทดสอบจะแสดงอยู่ด้านล่างเป็นตัวเลือกแบบคลิกครั้งเดียวเพื่อเริ่มการทดสอบ การคลิกแถวใดก็ได้จะไปยังแท็บ A/B ของเอเจนต์นั้นเพื่อปรับแต่งหรือสรุปการทดสอบ

ขั้นตอนถัดไป#