基于網絡爬蟲理論的地理信息獲取方式研究.pdf

1、近年來，隨著計算機科學的發(fā)展，網絡大數(shù)據(jù)時代到來，為數(shù)據(jù)獲取提供了一種新的思路。傳統(tǒng)的GIS信息獲取方式主要采用實地測量以及柵格地圖、影像進行獲取，需要大量的人力物力。通過深入網絡數(shù)據(jù)挖掘，大量的屬性數(shù)據(jù)以及矢量數(shù)據(jù)也可以從網絡中進行獲取。網絡爬蟲作為一種搜索引擎，為GIS信息獲取提供了方便，它能從大量的網絡平臺上獲取可靠相對真實的數(shù)據(jù)。將網絡爬蟲技術應用于地理信息系統(tǒng)可以較好的解決數(shù)據(jù)獲取方面的難點。
　　本文在研究網絡爬蟲的原

2、理時，將其應用于GIS信息獲取過程。主要研究了網絡爬蟲在屬性信息獲取、矢量信息獲取以及將二者結合起來，并將其應用于房產評估系統(tǒng)當中。設計研究了網絡爬蟲軟件關鍵技術與基于Web的GIS信息管理系統(tǒng)開發(fā)的關鍵技術。在通過網絡爬蟲獲取了數(shù)據(jù)之后將其應用與GIS信息管理系統(tǒng)當中。
　　本文的主要研究內容:
　?。?)通過深入研究相關網頁結構，通過對靜態(tài)網頁和動態(tài)網頁進行分析，獲得網頁上相關的數(shù)據(jù)。利用相關技術，模擬用戶操作過程，獲得

3、返回數(shù)據(jù)。
　　(2)通過分析研究電子地圖瓦片結構，了解電子地圖結構。獲取瓦片的地址鏈接，進行下載拼接。
　　(3)深入研究ArcGIS自動矢量化過程，將獲取的柵格地圖進行二值化，并進行自動矢量化。
　　(4)本文研究了ArcGIS提供的一組針對JavaScript腳本，對地圖服務進行調用，嘗試了將獲取的矢量地圖應用于實際任務中的可行性。
　　(5)研究了JavaWeb相關開發(fā)技術，將獲取的GIS屬性數(shù)據(jù)以及空間