వాలిడేషన్ సెట్లు: డిప్లాయ్మెంట్కు ముందు నిజమైన కాల్ టర్న్లను మళ్లీ ప్లే చేయండి
ఒక వాలిడేషన్ ఉదాహరణ నిజమైన కాల్లోని ఒక ఏజెంట్ టర్న్ను స్థిరీకరిస్తుంది: దానికి ముందు జరిగిన సంభాషణ, సంబంధిత కాలర్ ఆడియో, ఏజెంట్ వాస్తవంగా చేసినది, మరియు అది చేయాల్సిన దానికి సంబంధించిన గ్రౌండ్ ట్రూత్. ప్రస్తుత డ్రాఫ్ట్పై ఒక సెట్ను రీప్లే చేయడం వల్ల మరో కాల్ చేయకుండానే రిగ్రెషన్లను గుర్తించవచ్చు.
డేటాసెట్ను రూపొందించడానికి మరియు సమీక్షించడానికి సంస్థవ్యాప్త వాలిడేషన్ సెట్లు పేజీని
(/dashboard/validation) ఉపయోగించండి. సెట్ను అమలు చేయడానికి మరియు రన్ చరిత్రను పరిశీలించడానికి వ్యక్తిగత ఏజెంట్ యొక్క వాలిడేషన్ ట్యాబ్ను ఉపయోగించండి.
కాల్ చరిత్ర నుండి ఉదాహరణలను జోడించండి
- ఉదాహరణలను జోడించు ఎంచుకోండి
ఉదాహరణ ధృవీకరించాల్సిన ప్రవర్తన ఉన్న ఏజెంట్ను ఎంచుకోండి. వర్క్స్పేస్ ఆ ఏజెంట్ కోసం ఇటీవలి సిమ్యులేషన్ కాని గరిష్ఠంగా 25 కాల్లను చూపుతుంది.
- కాల్ మరియు ఏజెంట్ టర్న్ను ఎంచుకోండి
ట్రాన్స్క్రిప్ట్ను చదవండి, మీరు భద్రపరచాలనుకునే ఏజెంట్ టర్న్పై హోవర్ చేసి, చెక్లిస్ట్ చర్యను ఎంచుకోండి. ఆ టర్న్ వరకు ఉన్న సంభాషణ మరియు దాని కాలర్ ఆడియో స్పాన్లు వాలిడేషన్ డేటాసెట్లోకి కాపీ చేయబడతాయి.
- అంచనాను సమీక్షించండి
సరైన ప్రవర్తనకు సంబంధించిన వివరణను ThunderPhone డ్రాఫ్ట్ చేస్తుంది. అది నిర్దిష్టంగా మరియు పరీక్షించదగినదిగా ఉండేలా సవరించండి; ఐచ్ఛికంగా ఆమోదించిన ఉదాహరణ ప్రతిస్పందనను మరియు ఆశించిన టూల్ కాల్లను సవరించండి.
- సేవ్ చేయండి లేదా సక్రియం చేయండి
డ్రాఫ్ట్ను సేవ్ చేయండి ఉదాహరణను సమీక్ష అవసరంలో ఉంచుతుంది. సేవ్ చేసి సక్రియం చేయండి భవిష్యత్ వాలిడేషన్ రన్లలో దానిని చేర్చుతుంది.
అదే టర్న్ను రెండుసార్లు ప్రమోట్ చేస్తే రెండు కాపీలను సృష్టించకుండా ఇప్పటికే ఉన్న ఉదాహరణనే మళ్లీ ఉపయోగిస్తుంది.
ఉదాహరణ రకాలు మరియు స్థితులు
రకాలు ఒక ఉదాహరణ ఎందుకు ఉందో వివరిస్తాయి:
| రకం | ఉపయోగం |
|---|---|
| విఫలం | మీరు నిరోధించాలనుకునే ప్రవర్తనను బహిర్గతం చేసిన నిజమైన ప్రతిస్పందన. |
| గోల్డెన్ | భద్రపరచదగిన, ఇప్పటికే మంచి అని తెలిసిన ప్రతిస్పందన. |
| మాన్యువల్ | ఈ రెండు వర్గాల్లో ఏదీ కాని, మాన్యువల్గా క్యూరేట్ చేసిన కేసు. |
స్థితులు జీవితచక్రాన్ని నియంత్రిస్తాయి:
| స్థితి | అర్థం |
|---|---|
| సమీక్ష అవసరం | గ్రౌండ్ ట్రూత్ ఇంకా సమీక్షలో ఉంది; రన్ల నుండి మినహాయించబడుతుంది. |
| సక్రియం | వాలిడేషన్ రన్లలో చేర్చబడుతుంది. |
| పాతది | ఉదాహరణ స్థిరీకరించిన తర్వాత prompt మారింది; దాని అంచనాను సమీక్షించండి. |
| అనుకూలం కాదు | ప్రస్తుత కాన్ఫిగరేషన్తో ఉదాహరణను రీప్లే చేయలేరు. |
| ఆర్కైవ్ చేయబడింది | చరిత్ర కోసం భద్రపరచబడుతుంది, కానీ రన్ల నుండి మినహాయించబడుతుంది. |
డేటాసెట్ను బ్రౌజ్ చేసి మెరుగుపరచండి
సంస్థ డేటాసెట్ను ఏజెంట్, స్థితి, లేదా రకం ఆధారంగా ఫిల్టర్ చేయండి. ఒక ఉదాహరణను ఎంచుకుంటే ఇవి కనిపిస్తాయి:
- స్థిరీకరించిన సంభాషణ సందర్భం మరియు ప్లే చేయగల కాలర్ ఆడియో స్పాన్లు.
- మూల కాల్ మరియు అసలు ప్రతిస్పందన.
- గ్రౌండ్-ట్రూత్ అంచనా, ఆమోదించిన మాట్లాడే ప్రతిస్పందన, మరియు టూల్ కాల్లు.
- అసలు మరియు ఆశించిన ప్రవర్తన పక్కన తాజా రీప్లే.
- అందుబాటులో ఉన్నప్పుడు తాజా తీర్పు మరియు జడ్జ్ వివరణలు.
అంచనాను లేదా ఆమోదించిన ప్రతిస్పందనను సవరించడానికి గ్రౌండ్ ట్రూత్ను సవరించండి ఎంచుకోండి. పూర్తి రన్ను ప్రారంభించకుండా ఆ ఉదాహరణను మాత్రమే పరీక్షించడానికి డ్రాఫ్ట్పై రీప్లే చేయండి ఎంచుకోండి. రీప్లేలు ఏజెంట్ యొక్క ప్రస్తుత డ్రాఫ్ట్ను ఉపయోగిస్తాయి; తప్పనిసరిగా దాని డిప్లాయ్ చేసిన కాన్ఫిగరేషన్ను కాదు.
వాలిడేషన్ సెట్ను అమలు చేయండి
ఏజెంట్ యొక్క వాలిడేషన్ ట్యాబ్ నుండి, ప్రతి సక్రియ ఉదాహరణపై రన్ను ప్రారంభించండి. ప్రతి ఉదాహరణకు ఈ తీర్పులలో ఒకటి వస్తుంది:
- పాస్ — ప్రతిస్పందన అంచనా మరియు కాలర్ ఆడియోను సంతృప్తిపరుస్తుంది.
- హెచ్చరిక — ప్రతిస్పందన ఉపయోగించదగినది, కానీ ఒక తనిఖీ అనిశ్చితిని గుర్తించింది.
- విఫలం — అది ఆడియోకు విరుద్ధంగా ఉంది లేదా అవసరమైన ప్రవర్తనను కోల్పోయింది.
- దాటవేయబడింది — అవసరమైన కాలర్ ఆడియోను లోడ్ చేయలేకపోయారు; ఇది పాస్-రేట్ హారం నుండి మినహాయించబడుతుంది.
- లోపం — రీప్లే లేదా గ్రేడింగ్ పూర్తి కాలేకపోయింది.
రన్ సారాంశం పాస్, హెచ్చరిక, వైఫల్యం, మరియు దాటవేసిన లెక్కలను, పాస్ రేట్ను, అంచనా వ్యయాన్ని, అలాగే ముందు పూర్తయిన రన్తో పోలిస్తే పాస్ నుండి ఫెయిల్కు జరిగిన ఏ రిగ్రెషన్నైనా నివేదిస్తుంది. ఒక సమయంలో ఒక్కో ఏజెంట్కు ఒక వాలిడేషన్ రన్ మాత్రమే సక్రియంగా ఉండగలదు.
ధృవీకరణ ఆధారాలతో డిప్లాయ్ చేయండి
ఏజెంట్కు ధృవీకరణ ఉదాహరణలు ఉన్నప్పుడు, తాజా పూర్తయిన రన్ ప్రస్తుత డ్రాఫ్ట్తో సరిపోతుందో లేదో డిప్లాయ్ డైలాగ్ చూపిస్తుంది. మీరు:
- చూపించిన పాస్ రేట్ మరియు రిగ్రెషన్ కౌంట్తో డిప్లాయ్ చేయండి.
- సరిపోలే రన్ లేకపోతే ముందుగా ధృవీకరణను రన్ చేయండి.
- ఫలితాన్ని సమీక్షించిన తర్వాత ఉద్దేశపూర్వకంగా ఎలాగైనా డిప్లాయ్ చేయండి.
ధృవీకరణ అనేది ఆధారం మరియు డిప్లాయ్మెంట్ తనిఖీ; ఇది ఆటోమేటిక్ ప్రొడక్షన్ ట్రాఫిక్ విభజన కాదు. లైవ్ పోలికల కోసం, ఎక్స్పెరిమెంట్లు (A/B టెస్టింగ్) ఉపయోగించండి.
API ఆటోమేషన్
ధృవీకరణ సెట్స్ API టర్న్లను ప్రమోట్ చేయడం, ఉదాహరణలను నిర్వహించడం, పిన్ చేసిన ఆడియోను స్ట్రీమ్ చేయడం, వ్యక్తిగత రీప్లేలు, బ్యాచ్ రన్లు, రన్ ఫలితాలు, డిప్లాయ్ సమయంలో స్టేటస్, మరియు సంస్థ అవలోకనాన్ని కవర్ చేస్తుంది.