微博輿情分析系統(tǒng)信息處理模塊的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、微博作為迅速崛起的新興社交網(wǎng)絡(luò)，因?yàn)樾畔⒌膩碓戳驾积R，以及民眾的盲從性，利用微博傳播謠言，擾亂社會治安的事件時有發(fā)生。如今，平均每小時的微博發(fā)布量高達(dá)數(shù)百萬條，僅僅通過人工手段來對如此多條目進(jìn)行監(jiān)控和分析幾乎是不可能完成的任務(wù)，因此依靠現(xiàn)代文本自動分析技術(shù)來開發(fā)一款微博輿情分析預(yù)警系統(tǒng)迫在眉睫。
　　本論文的工作是為一款微博輿情信息分析系統(tǒng)設(shè)計(jì)和開發(fā)其中的信息處理模塊。論文首先介紹了微博輿情分析系統(tǒng)的整體框架設(shè)計(jì)，概括描述了該系

2、統(tǒng)底層的信息采集、索引和分詞模塊和其所涉及的相關(guān)開源軟件和技術(shù)。本系統(tǒng)的分析手段是通過微博字詞來進(jìn)行的，對其所使用的潛在語義分析(LSA)也做出了相應(yīng)的介紹。
　　論文的后幾部分主要介紹信息處理模塊，給出其整體設(shè)計(jì)架構(gòu)，以及實(shí)時統(tǒng)計(jì)、自定義統(tǒng)計(jì)、同類詞歸并、微博影響力分析等功能點(diǎn)的具體設(shè)計(jì)和編碼實(shí)現(xiàn)。系統(tǒng)完成的主要功能包括:
　　1)新浪微博的實(shí)時統(tǒng)計(jì)和預(yù)警;
　　2)各類復(fù)雜且精確地自定義統(tǒng)計(jì);
　　3)同類詞