基于網(wǎng)絡(luò)爬蟲(chóng)理論的地理信息獲取方式研究.pdf

1、近年來(lái)，隨著計(jì)算機(jī)科學(xué)的發(fā)展，網(wǎng)絡(luò)大數(shù)據(jù)時(shí)代到來(lái)，為數(shù)據(jù)獲取提供了一種新的思路。傳統(tǒng)的GIS信息獲取方式主要采用實(shí)地測(cè)量以及柵格地圖、影像進(jìn)行獲取，需要大量的人力物力。通過(guò)深入網(wǎng)絡(luò)數(shù)據(jù)挖掘，大量的屬性數(shù)據(jù)以及矢量數(shù)據(jù)也可以從網(wǎng)絡(luò)中進(jìn)行獲取。網(wǎng)絡(luò)爬蟲(chóng)作為一種搜索引擎，為GIS信息獲取提供了方便，它能從大量的網(wǎng)絡(luò)平臺(tái)上獲取可靠相對(duì)真實(shí)的數(shù)據(jù)。將網(wǎng)絡(luò)爬蟲(chóng)技術(shù)應(yīng)用于地理信息系統(tǒng)可以較好的解決數(shù)據(jù)獲取方面的難點(diǎn)。
　　本文在研究網(wǎng)絡(luò)爬蟲(chóng)的原

2、理時(shí)，將其應(yīng)用于GIS信息獲取過(guò)程。主要研究了網(wǎng)絡(luò)爬蟲(chóng)在屬性信息獲取、矢量信息獲取以及將二者結(jié)合起來(lái)，并將其應(yīng)用于房產(chǎn)評(píng)估系統(tǒng)當(dāng)中。設(shè)計(jì)研究了網(wǎng)絡(luò)爬蟲(chóng)軟件關(guān)鍵技術(shù)與基于Web的GIS信息管理系統(tǒng)開(kāi)發(fā)的關(guān)鍵技術(shù)。在通過(guò)網(wǎng)絡(luò)爬蟲(chóng)獲取了數(shù)據(jù)之后將其應(yīng)用與GIS信息管理系統(tǒng)當(dāng)中。
　　本文的主要研究?jī)?nèi)容:
　?。?)通過(guò)深入研究相關(guān)網(wǎng)頁(yè)結(jié)構(gòu)，通過(guò)對(duì)靜態(tài)網(wǎng)頁(yè)和動(dòng)態(tài)網(wǎng)頁(yè)進(jìn)行分析，獲得網(wǎng)頁(yè)上相關(guān)的數(shù)據(jù)。利用相關(guān)技術(shù)，模擬用戶(hù)操作過(guò)程，獲得

3、返回?cái)?shù)據(jù)。
　　(2)通過(guò)分析研究電子地圖瓦片結(jié)構(gòu)，了解電子地圖結(jié)構(gòu)。獲取瓦片的地址鏈接，進(jìn)行下載拼接。
　　(3)深入研究ArcGIS自動(dòng)矢量化過(guò)程，將獲取的柵格地圖進(jìn)行二值化，并進(jìn)行自動(dòng)矢量化。
　　(4)本文研究了ArcGIS提供的一組針對(duì)JavaScript腳本，對(duì)地圖服務(wù)進(jìn)行調(diào)用，嘗試了將獲取的矢量地圖應(yīng)用于實(shí)際任務(wù)中的可行性。
　　(5)研究了JavaWeb相關(guān)開(kāi)發(fā)技術(shù)，將獲取的GIS屬性數(shù)據(jù)以及空間