تجربات (A/B ٹیسٹنگ)
A/B ٹیسٹنگ "کیا نیا prompt واقعی بہتر ہے؟" کا جواب اندازوں کے بجائے ڈیٹا سے دیتی ہے: آنے والی کالز ایجنٹ کے ویریئنٹس کے درمیان تقسیم ہوتی ہیں، ہر کال کو معمول کے مطابق گریڈ کیا جاتا ہے، اور آپ ہر ویریئنٹ کی کامیابی کی شرح کا موازنہ کرتے ہیں۔
اس کے دو حصے ہیں:
- ہر ایجنٹ کے لیے — ٹیسٹ ہر ایجنٹ کے بلڈر میں، اس کے A/B ٹیب (
/dashboard/agents/<id>?tab=variants) پر کنفیگر اور بہتر کیے جاتے ہیں۔ یہیں ویریئنٹس بنائے جاتے ہیں اور ٹیسٹ آن کیا جاتا ہے۔ - متعدد ایجنٹس کا جائزہ — Experiments صفحہ (
/dashboard/experiments، Quality & Testing کے تحت) ہر ایجنٹ کے ٹیسٹ کو ایک جدول میں جمع کرتا ہے۔
ٹیسٹ ترتیب دیں
Experiments صفحے سے A/B ٹیسٹ ترتیب دیں پر کلک کریں اور ایک ایجنٹ منتخب کریں — آپ اس ایجنٹ کے A/B ٹیب پر پہنچ جائیں گے، جہاں آپ ویریئنٹ کنفیگریشنز بناتے ہیں (ایک کو کنٹرول کے طور پر نشان زد کیا جاتا ہے) اور تقسیم شدہ ٹیسٹنگ فعال کرتے ہیں۔ خود بلڈر کے لیے ایجنٹ بنائیں دیکھیں۔
جائزہ پڑھیں
ٹیسٹ والے ہر ایجنٹ کے لیے، Experiments جدول یہ دکھاتا ہے:
- حالت — فعال (تقسیم شدہ ٹیسٹنگ آن ہے) یا موقوف۔
- ویریئنٹس — ہر ویریئنٹ بطور چِپ، جس میں کنٹرول کا لیبل شامل ہوتا ہے۔
- سبقت رکھنے والا — اب تک بہترین کامیابی کی شرح والا ویریئنٹ، اس کے فیصد کے ساتھ۔ جب تک ویریئنٹس میں گریڈ شدہ کالز نہ ہوں، یہاں ابھی کافی ڈیٹا نہیں ہے دکھائی دیتا ہے — چند کالز کی بنیاد پر کسی کو فاتح قرار نہ دیں۔
- کالز — ٹیسٹ کے ویریئنٹس میں شامل کل کالز۔
جن ایجنٹس کا کوئی ٹیسٹ نہیں ہے وہ نیچے ایک کلک کے ذریعے ٹیسٹ شروع کرنے کے اشاروں کے طور پر درج ہوتے ہیں۔ کسی بھی قطار پر کلک کرنے سے آپ ٹیسٹ کو بہتر بنانے یا ختم کرنے کے لیے اس ایجنٹ کے A/B ٹیب پر پہنچ جاتے ہیں۔