基于HTTP協(xié)議的網(wǎng)絡數(shù)據(jù)分析系統(tǒng)的設計與實現(xiàn).pdf

1、隨著經(jīng)濟社會的發(fā)展，網(wǎng)絡深刻地改變和影響著人們各方面的生活習慣，包括社交、電子商務、閱讀、知識學習等。科技進步也導致了網(wǎng)絡終端接入設備的增加，個人用戶能夠更加容易接觸網(wǎng)絡。互聯(lián)網(wǎng)新經(jīng)濟的崛起，導致人們的網(wǎng)絡活動完全是現(xiàn)實生活的縮影。網(wǎng)絡上的信息量呈現(xiàn)爆炸式增長，在此背景下，通過收集網(wǎng)絡流量日志，分析某一個IP地址下的網(wǎng)絡狀況，從而刻畫用戶畫像，以了解各個IP地址的信息以及其下可能存在的用戶數(shù)據(jù)。
　　本系統(tǒng)提出基于HTTP協(xié)議數(shù)據(jù)

2、的分析系統(tǒng)，從HTTP協(xié)議的流量信息、報文信息、正文信息三個方面分析當前的網(wǎng)絡狀況，描述了從IP地址到終端設備再到用戶個人的網(wǎng)絡模型。統(tǒng)計了HTTP協(xié)議中的IP流量信息，設計了應用于IP地址依據(jù)應用服務劃分的樸素貝葉斯分類模型，在IP地址層面描繪了網(wǎng)絡狀況。參考了HTTP協(xié)議中User_Agent字段的變動歷史，提出了從User_Agent字段中提取瀏覽器信息、設備名稱和操作系統(tǒng)的方法，實現(xiàn)了終端設備層面的分析。對于用戶層面，解析了HT

3、TP協(xié)議正文，包括JSON格式和HTML格式的數(shù)據(jù)，提取了B/S架構(gòu)的軟件和用戶交互時包含的個人數(shù)據(jù)，設計了基于HTML格式數(shù)據(jù)的知識學習方法以擴充提取數(shù)據(jù)所依賴的知識庫信息。在數(shù)據(jù)分析的基礎上，設計了信息展示平臺，以Web的形式提供服務，通過jQuery和Bootstrap等前端框架，實現(xiàn)了簡潔易用友好的界面，采用Tomcat服務器，Mysql作為數(shù)據(jù)庫，使用MyISAM存儲引擎提高讀寫效率。
　　最后，本文設計了對該系統(tǒng)進行功