面向客服的自動(dòng)問答系統(tǒng)關(guān)鍵技術(shù)研究.pdf

1、自動(dòng)問答系統(tǒng)是自然語(yǔ)言處理領(lǐng)域的一個(gè)重要研究方向，旨在讓用戶用自然語(yǔ)言進(jìn)行提問并獲得答案。基于常問問題集的問答系統(tǒng)，將用戶的常問問題和與之相應(yīng)的答案組織起來，所給定的答案更加準(zhǔn)確、高效。一直以來，如何獲取高質(zhì)量的海量常問問題集數(shù)據(jù)是該類系統(tǒng)的發(fā)展瓶頸，而目前互聯(lián)網(wǎng)中存在著數(shù)以千計(jì)的人工客服，每天產(chǎn)生數(shù)以十萬計(jì)的人工客服數(shù)據(jù)，為基于常問問題集的問答系統(tǒng)提供了新的發(fā)展機(jī)遇。
　　本文以某游戲交易平臺(tái)的23萬人工問答語(yǔ)料為數(shù)據(jù)基礎(chǔ)，以該

2、平臺(tái)在線自動(dòng)客服系統(tǒng)為應(yīng)用背景，主要做了以下幾方面工作:
　　首先，本文設(shè)計(jì)了一套完整的基于常問問題集的問答原型系統(tǒng)。在本文所設(shè)計(jì)的系統(tǒng)的框架內(nèi)，綜合運(yùn)用中文分詞、命名實(shí)體識(shí)別、中文詞性標(biāo)注、句法分析、關(guān)鍵詞提取、信息檢索、相似度計(jì)算法等相關(guān)技術(shù)與算法，為在海量數(shù)據(jù)上實(shí)現(xiàn)基于常問問題集的問答系統(tǒng)提供了一套完整的解決方案。
　　然后，本文重點(diǎn)對(duì)基于常問問題集問答系統(tǒng)中的核心模塊——問句相似度計(jì)算模塊進(jìn)行了詳盡的研究與分析。通過

3、對(duì)幾種傳統(tǒng)相似度計(jì)算方法的比較，結(jié)合本文的實(shí)際應(yīng)用背景，總結(jié)出運(yùn)用傳統(tǒng)相似度計(jì)算方法解決本文所處理問題時(shí)的缺陷與不足。在研究與分析的基礎(chǔ)上，本文從權(quán)重調(diào)整、同義詞擴(kuò)展、詞匯對(duì)齊、依存句法分析等幾個(gè)角度提出了詳細(xì)的改進(jìn)方案，并引入線性模型，使用Pranking算法對(duì)本文所研究的多種相似度計(jì)算方法進(jìn)行特征融合，進(jìn)一步提升系統(tǒng)性能。
　　最后，本文通過實(shí)驗(yàn)，對(duì)前文的理論分析的正確性和本文提出的改進(jìn)算法的有效性進(jìn)行驗(yàn)證。對(duì)于效果較差的相似