सफलता मूल्यांकन

• सफलता और विफलता की स्पष्ट परिभाषा दें
• अपने प्रॉम्प्ट में एज केस और उदाहरण शामिल करें
• जहां संभव हो, स्पष्ट और मापने योग्य मानदंड अपनाएं
• बातचीत के अलग-अलग परिदृश्यों के साथ अपने प्रॉम्प्ट जांचें

• ग्राहक संतुष्टि: “अगर ग्राहक संतुष्टि जताता है या उसकी समस्या हल हो गई है, तो सफल के रूप में चिह्नित करें” - लक्ष्य पूरा होना: “अगर ग्राहक ने अनुरोध की गई कार्रवाई (बुकिंग, खरीदारी आदि) पूरी कर ली है, तो सफल के रूप में चिह्नित करें” - अनुपालन: “अगर एजेंट ने सभी आवश्यक अनुपालन प्रक्रियाओं का पालन किया है, तो सफल के रूप में चिह्नित करें” - समस्या का समाधान: “अगर कॉल के दौरान ग्राहक की तकनीकी समस्या हल हो गई है, तो सफल के रूप में चिह्नित करें”

जब LLM ट्रांसक्रिप्ट से सफलता या विफलता निर्धारित नहीं कर पाता, तो unknown परिणाम लौटाया जाता है। ऐसा अक्सर इन स्थितियों में होता है:

• अधूरी बातचीत
• ग्राहक के अस्पष्ट जवाब
• ट्रांसक्रिप्ट में जानकारी का अभाव

उन क्षेत्रों की पहचान करने के लिए unknown परिणामों पर नज़र रखें, जहां आपके मानदंड प्रॉम्प्ट को बेहतर बनाने की ज़रूरत हो सकती है।

• स्पष्टता और विशिष्टता के लिए अपने प्रॉम्प्ट की समीक्षा करें
• तर्क को सत्यापित करने के लिए नमूना बातचीत के साथ जांचें
• अपने मूल्यांकन मानदंडों में एज केस पर विचार करें
• जांचें कि ट्रांसक्रिप्ट में मूल्यांकन के लिए पर्याप्त जानकारी है या नहीं

• सुनिश्चित करें कि आपके प्रॉम्प्ट में साफ़ बताया गया है कि कौन-सी जानकारी देखनी है - विचार करें कि बातचीत में मूल्यांकन के लिए पर्याप्त संदर्भ है या नहीं - ट्रांसक्रिप्ट की गुणवत्ता और पूर्णता की समीक्षा करें - सामान्य एज केस को संभालने के लिए मानदंड समायोजित करें

• हर मूल्यांकन मानदंड बातचीत विश्लेषण में प्रोसेसिंग समय जोड़ता है
• जटिल प्रॉम्प्ट का मूल्यांकन करने में अधिक समय लग सकता है
• विस्तृत विश्लेषण और प्रतिक्रिया समय के बीच संतुलन पर विचार करें
• अपनी खास ज़रूरतों के अनुसार अनुकूलन के लिए उपयोग पर नज़र रखें