1、為了在互聯(lián)網(wǎng)上保持良好的輿論導(dǎo)向，需要對(duì)互聯(lián)網(wǎng)上的信息進(jìn)行安全管控。互聯(lián)網(wǎng)信息內(nèi)容安全管控工作的重點(diǎn)是獲取重要網(wǎng)絡(luò)媒體的發(fā)布信息，即對(duì)互聯(lián)網(wǎng)上發(fā)布的信息進(jìn)行信息采集。 在上海市科委“網(wǎng)絡(luò)媒體信息內(nèi)容安全管控引擎核心技術(shù)研究與應(yīng)用”項(xiàng)目的支持下，論文作者參與了開(kāi)發(fā)互聯(lián)網(wǎng)輿情管控平臺(tái)信息采集模塊的相關(guān)工作。圍繞互聯(lián)網(wǎng)媒體內(nèi)容采集若干關(guān)鍵技術(shù)，作者提出了改善當(dāng)前互聯(lián)網(wǎng)媒體內(nèi)容采集系統(tǒng)性能的改進(jìn)方案，使得輿情管控領(lǐng)域信息獲取平臺(tái)的性能得

2、以提高。 本文首先回顧了當(dāng)前互聯(lián)網(wǎng)媒體內(nèi)容采集領(lǐng)域已有的技術(shù)和理論，列舉了內(nèi)容協(xié)商，身份認(rèn)證以及Web信息采集方面的理論和技術(shù)。在回顧已有成果的基礎(chǔ)上，本文對(duì)互聯(lián)網(wǎng)上的內(nèi)容協(xié)商機(jī)制進(jìn)行了詳細(xì)的研究。通過(guò)分析，確定了在當(dāng)前互聯(lián)網(wǎng)媒體內(nèi)容采集系統(tǒng)中加入內(nèi)容協(xié)商機(jī)制的方法。 基于上述理論，作者通過(guò)在原有信息采集平臺(tái)上添加身份認(rèn)證模塊，提出了基于Cookie進(jìn)行身份認(rèn)證網(wǎng)站的信息采集方案，解決了當(dāng)前信息采集系統(tǒng)在應(yīng)對(duì)需要身份認(rèn)證