1、GIS是一門以數(shù)據(jù)為基礎(chǔ)的學(xué)科，空間分析、空間統(tǒng)計(jì)和空間數(shù)據(jù)挖掘等研究都離不開空間數(shù)據(jù)的支撐，而互聯(lián)網(wǎng)中存在著海量的空間數(shù)據(jù)，這些數(shù)據(jù)與人們的日常生活活動(dòng)密切相關(guān)并且包含的信息量十分豐富、現(xiàn)勢(shì)性極強(qiáng)。如果能夠?qū)ヂ?lián)網(wǎng)中廣泛存在的空間數(shù)據(jù)進(jìn)行高效地獲取、解析與管理，一方面不僅可以補(bǔ)充基礎(chǔ)地理信息的不足，提供豐富的細(xì)節(jié)和準(zhǔn)實(shí)時(shí)更新，另一方面還能夠?yàn)镚IS空間分析和空間數(shù)據(jù)挖掘提供更為豐富和實(shí)時(shí)的數(shù)據(jù)源。
　　Web空間數(shù)據(jù)獲取與管理首

2、先需要對(duì)多源異構(gòu)Web空間數(shù)據(jù)進(jìn)行獲取，然后需要對(duì)獲取到的數(shù)據(jù)進(jìn)行細(xì)粒度的解析，從中提取出感興趣的位置和屬性信息。進(jìn)一步的，還需要解決多源異構(gòu)Web空間數(shù)據(jù)的存儲(chǔ)與管理問(wèn)題。因此，本文針對(duì)單機(jī)網(wǎng)絡(luò)爬蟲獲取Web空間數(shù)據(jù)在抓取覆蓋率和抓取效率上受到限制，難以保證抓取數(shù)據(jù)的及時(shí)性和全面性問(wèn)題，研究了基于分布式網(wǎng)絡(luò)爬蟲的Web空間數(shù)據(jù)獲取方法。針對(duì)不同來(lái)源Web空間數(shù)據(jù)結(jié)構(gòu)內(nèi)容不同，周期性更新、解析困難的問(wèn)題，研究了基于模板映射的Web空間數(shù)

3、據(jù)解析方法。針對(duì)關(guān)系型數(shù)據(jù)庫(kù)管理系統(tǒng)處理多源異構(gòu)Web空間數(shù)據(jù)困難的問(wèn)題，研究了基于非關(guān)系型數(shù)據(jù)庫(kù)MongoDB的Web空間數(shù)據(jù)管理方法。最后基于上述方法，研發(fā)了Web空間數(shù)據(jù)獲取原型系統(tǒng)，實(shí)現(xiàn)了Web空間數(shù)據(jù)的高效獲取、解析與管理，通過(guò)對(duì)原型系統(tǒng)進(jìn)行測(cè)試證實(shí)了本文所述方法的有效性并對(duì)系統(tǒng)進(jìn)行了實(shí)例應(yīng)用。
　　通過(guò)以上的研究工作，得出如下結(jié)論:
　　(1)基于分布式網(wǎng)絡(luò)爬蟲的Web空間數(shù)據(jù)獲取方法能夠提高Web空間數(shù)據(jù)獲取效

4、率。本文設(shè)計(jì)和實(shí)現(xiàn)的Web空間數(shù)據(jù)獲取原型系統(tǒng)能夠穩(wěn)定運(yùn)行，系統(tǒng)具有良好的擴(kuò)展性，系統(tǒng)各個(gè)節(jié)點(diǎn)之間能夠?qū)崿F(xiàn)負(fù)載均衡。
　　(2)基于模板映射的Web空間數(shù)據(jù)解析方法能夠?qū)崿F(xiàn)多源異構(gòu)Web空間數(shù)據(jù)的自動(dòng)化、高準(zhǔn)確度解析。在解析準(zhǔn)確率方面，基于模板映射的解析方法與傳統(tǒng)的正則表達(dá)式解析法相當(dāng)。在解析召回率方面，基于模板映射的解析方法優(yōu)于傳統(tǒng)正則表達(dá)式解析法。
　　(3)基于MongoDB的Web空間數(shù)據(jù)存儲(chǔ)與管理方法能夠?qū)崿F(xiàn)多源異