中文樹(shù)庫(kù)依存關(guān)系解析的研究.pdf

1、句法分析是自然語(yǔ)言處理的關(guān)鍵技術(shù)，依存關(guān)系解析是句法分析的方法之一，這種方法解析句子詞語(yǔ)間的依存關(guān)系，依存關(guān)系可以明確地表明詞語(yǔ)間的支配關(guān)系，并能方便地轉(zhuǎn)化為語(yǔ)義依存描述。賓州中文樹(shù)庫(kù)(Penn Chinese Treebank，CTB)是國(guó)內(nèi)外研究人員公用的短語(yǔ)結(jié)構(gòu)樹(shù)庫(kù)，但是CTB是短語(yǔ)結(jié)構(gòu)樹(shù)庫(kù)，而且沒(méi)有標(biāo)明每個(gè)短語(yǔ)的中心子節(jié)點(diǎn)，所以必須首先將CTB轉(zhuǎn)換為依存結(jié)構(gòu)樹(shù)庫(kù)，然后基于轉(zhuǎn)換后的CTB才能進(jìn)行中文依存關(guān)系解析。 本文首先

2、根據(jù)CTB中的短語(yǔ)結(jié)構(gòu)，通過(guò)大規(guī)模語(yǔ)料的分析和漢語(yǔ)句法的特點(diǎn)，總結(jié)出來(lái)中心子節(jié)點(diǎn)過(guò)濾表，通過(guò)中心子節(jié)點(diǎn)過(guò)濾表進(jìn)行賓州中文樹(shù)庫(kù)的短語(yǔ)結(jié)構(gòu)向依存結(jié)構(gòu)的轉(zhuǎn)換，以便為后續(xù)實(shí)驗(yàn)的學(xué)習(xí)和測(cè)試提供語(yǔ)料。實(shí)驗(yàn)采用了CTB 5.0賓州中文短語(yǔ)樹(shù)庫(kù)，利用中心子節(jié)點(diǎn)過(guò)濾表把短語(yǔ)結(jié)構(gòu)向依存結(jié)構(gòu)轉(zhuǎn)換之后，本文隨機(jī)抽取了CTB 5.0語(yǔ)料中的200句，進(jìn)行了人工的依存關(guān)系標(biāo)注，測(cè)試正確率為99.95％. 然后本文采用考慮遠(yuǎn)距離的確定性Nivre算法和基于根

3、節(jié)點(diǎn)的確定性Nivre算法，進(jìn)行了依存結(jié)構(gòu)的賓州中文樹(shù)庫(kù)學(xué)習(xí)和測(cè)試，依存關(guān)系的正確率分別為65.43％和74.35％?？紤]遠(yuǎn)距離的依存的確定性Nivre算法，在原有Nivre算法的基礎(chǔ)上，根據(jù)漢語(yǔ)語(yǔ)法的特點(diǎn)適當(dāng)?shù)卦黾恿藢?duì)遠(yuǎn)距離依存關(guān)系的判斷；基于根節(jié)點(diǎn)的確定性Nivre算法，可以將原句切分為兩個(gè)較簡(jiǎn)單的分句，再對(duì)每個(gè)分句利用考慮遠(yuǎn)距離依存的確定性Nivre算法進(jìn)行依存關(guān)系解析，既可以降低解析難度，又可以避免出現(xiàn)跨越根節(jié)點(diǎn)的依存關(guān)系。