1、基于人工標(biāo)注的評(píng)價(jià)
基于問(wèn)答知識(shí)庫(kù)來(lái)回答的系統(tǒng)，回答能力受限于知識(shí)庫(kù)的豐富程度，也就是說(shuō)知識(shí)庫(kù)對(duì)用戶(hù)問(wèn)題的覆蓋率，覆蓋率越高，準(zhǔn)確性越高。
因此并非能回答用戶(hù)的所有問(wèn)題，系統(tǒng)最佳的狀態(tài)是將能回答的全部回答準(zhǔn)確，不能回答的全部拒識(shí)，即拒絕回答。
因此這里的評(píng)價(jià)指標(biāo)包括有問(wèn)題解決率、拒識(shí)率、召回率和準(zhǔn)確率等，
召回率=機(jī)器人能回答的問(wèn)題數(shù)/問(wèn)題總數(shù)
準(zhǔn)確率=機(jī)器人正確回答的問(wèn)題數(shù)/問(wèn)題總數(shù)
問(wèn)題解決率=機(jī)器人成功解決的問(wèn)題數(shù)/問(wèn)題總數(shù)
拒識(shí)率=機(jī)器人未回答問(wèn)題數(shù)/用戶(hù)問(wèn)題數(shù)
通過(guò)從每日的全量數(shù)據(jù)集中抽樣出一個(gè)小數(shù)據(jù)集，保證小數(shù)據(jù)集的數(shù)據(jù)分布盡量符合全量數(shù)據(jù)集，然后由標(biāo)注團(tuán)隊(duì)對(duì)數(shù)據(jù)集做標(biāo)注，標(biāo)注出每個(gè)問(wèn)題的實(shí)際答案，一般標(biāo)注完成后還有質(zhì)檢的環(huán)節(jié)，以保證標(biāo)注結(jié)果盡量準(zhǔn)確，這樣便生成了每日數(shù)據(jù)的標(biāo)準(zhǔn)評(píng)測(cè)集。
2、基于用戶(hù)反饋的評(píng)價(jià)
人工評(píng)價(jià)能夠評(píng)價(jià)智能客服系統(tǒng)的準(zhǔn)確率，但是答案是否合理，能否為用戶(hù)解決問(wèn)題，需要用戶(hù)去反饋評(píng)價(jià)，整個(gè)智能客服系統(tǒng)的最終目標(biāo)是幫助用戶(hù)解決問(wèn)題。
最終統(tǒng)計(jì)參評(píng)比例、滿(mǎn)意度等指標(biāo)，這些指標(biāo)能夠真正反應(yīng)智能客服系統(tǒng)的好壞。實(shí)際中往往用戶(hù)參評(píng)比例低，可以使用各種方法去刺激用戶(hù)評(píng)價(jià)。
以上就是能夠得到一個(gè)客服系統(tǒng)最真實(shí)好壞的方法。長(zhǎng)沙朗深技術(shù)升級(jí)的智能客服系統(tǒng)在長(zhǎng)久的實(shí)踐中得到了廣大用戶(hù)的不斷好評(píng)。如果你也有客服系統(tǒng)需要進(jìn)行智能升級(jí)，朗深技術(shù)的呼叫中心智能升級(jí)套件是一個(gè)非常好的選擇。只需要在原先的呼叫中心基礎(chǔ)上利用呼叫中心套件，將智能呼叫中心功能添加進(jìn)去即可。
