發(fā)布時間：2020-05-20 23:56

【摘要】：互聯(lián)網信息平臺目前已經成為我國最大的信息交流和發(fā)布平臺。人們通過互聯(lián)網能夠及時的了解全球熱點事情,并且能夠根據事件來表達自己的想法,以及對事件處理的看法等。雖然互聯(lián)網平臺給人們帶來了信息、財富以及便捷的服務外,但互聯(lián)網平臺也出現(xiàn)了類似像反動、色情以及網絡犯罪等方面輿論信息,這些信息正在慢慢的侵蝕著人類的精神文明。為了能夠有效控制網絡輿情誘導事情的發(fā)生,必須將各類網絡信息進行提取、分析和判斷,從而有效監(jiān)控網絡輿情信息。系統(tǒng)利用爬蟲技術對新聞信息、論壇數據和博客數據的敏感詞匯進行提取,通過數據分析與處理技術來對熱點事情和敏感詞匯進行分析和挖掘,確保相關部門能夠及時的監(jiān)控社會熱點事情。首先,通過詳細分析國內外輿情監(jiān)控管理系統(tǒng)的研究現(xiàn)狀,明確課題所要實現(xiàn)的研究內容,在分析公安輿情建設目標的基礎上,對系統(tǒng)核心功能性需求和非功能性需求進行詳細的分析。其次,課題按照層次化結構設計理念,對系統(tǒng)功能架構和技術架構進行了重點的設計,通過層次化結構可以有效的降低系統(tǒng)模塊之間的關聯(lián)度,從根本上提高系統(tǒng)運行的穩(wěn)定性和效率;接著,重點對公安輿情數據采集、預處理、任務調度等功能進行詳細的設計,從而實現(xiàn)公安輿情數據的自動化、網絡化、標準化的采集及預處理。最后,課題對系統(tǒng)使用的分詞索引算法進行了詳細的設計與實現(xiàn),并實現(xiàn)系統(tǒng)的核心功能模塊。課題在設計與實現(xiàn)公安輿情監(jiān)控管理系統(tǒng)的基礎上,按照軟件測試的流程和測試方法對系統(tǒng)的核心功能進行了詳細的測試,通過系統(tǒng)測試說明,課題所實現(xiàn)的公安輿情監(jiān)控管理系統(tǒng)滿足用戶的實際需求,達到了系統(tǒng)建設的預期目標。
【圖文】：

針對公安輿情的結構化數據、非結構化數據、圖型數據等多類型數據，設計與實現(xiàn)逡逑公安輿情監(jiān)控管理系統(tǒng)的采集、存儲、分析和應用研宄。本系統(tǒng)的具體研宄內容主要包逡逑括五個部分。本文研宄內容關系框架如圖１．１所示。逡逑一：公安輿情數據邐丨二：公安輿情數據邐｜三：公安輿情數據逡逑獲取邐存儲邐分析與處理逡逑＾邐邐邐Ｎ邐／＊邐＼邐／邐＼逡逑＆安輿Ｗ存儲灥邐■數據處理逡逑ｖ邐Ｊ邐建立邐Ｖ邐ｙ逡逑ｆ公安輿情數據質量＾ｆ分布式分析模逡逑提升邐，邐＾建逡逑＼邐ｙ邋Ｃ邐］邋Ｖ．邐邐逡逑（邐公安輿情數據分布邐（邐＾逡逑分布式數據采集邐式管理邐圖像數據解析逡逑＼邐ｙ邐Ｖ．邐ｙ邐ｖ邐ｙ逡逑四：公安輿情監(jiān)控管理系統(tǒng)平臺構建逡逑、＋前１４１抵加＇ｉ邋ｆ數據分析與建模式具＂ｉ逡逑Ｉ平臺體系結構設計ｊ邋ｉ邋計算基礎框架ｊ邐邐ｊ逡逑五：公安輿情系統(tǒng)應用逡逑［數據統(tǒng)計）［輿髓警）［信息查詢］ｆ敏感詞管理＇逡逑圖１．１研究內容結構圖逡逑Ｆｉｇ．邋１．１邋Ｔｈｅ邋ｓｔｒｕｃｔｕｒｅ邋ｏｆ邋ｒｅｓｅａｒｃｈ邋ｃｏｎｔｅｎｔｓ逡逑（ｉ）公安輿情數據的獲取逡逑完成標準化公安輿情數據定義與接口規(guī)范制定、數據質量提升和分布式公安輿情數逡逑據采集的研宄

（存儲ｇＭＬ文＾逡逑Ｃ結束）逡逑圖２．１網絡爬蟲工作流程圖逡逑Ｆｉｇ．邋２．１邋Ｗｏｒｋ邋ｆｌｏｗ邋ｃｈａｒｔ邋ｏｆ邋ｗｅｂ邋ｃｒａｗｌｅｒ逡逑２．１．２網頁提取技術逡逑隨著網絡技術的不斷發(fā)展，各種海量數據信息以網頁的形式在互聯(lián)網平臺上展示，逡逑從而供訪問者進行瀏覽和利用。通過網絡爬蟲技術在互聯(lián)網平臺上獲得的數據大多數都逡逑是以ＨＭＴＬ形式進行存儲的。ＨＴＭＬ網頁格式多數是非結構化的、分散和異構的數據逡逑信息。通常包含兩部分內容，，分別是展示信息的網頁正文，另一個是與網頁不相關的數逡逑據信息，比如廣告、版權信息等，這部分數據與正文內容不相關，通常需要對這部分的逡逑內容進行過濾。由于ＨＴＭＬ網頁格式沒有固定的標準，內容和界面風格多樣化，從而逡逑９逡逑
【學位授予單位】：大連海事大學
【學位級別】：碩士
【學位授予年份】：2018
【分類號】：D631.4;TP311.52

【參考文獻】

相關期刊論文 前9條

1 諶艷青;;公安網絡輿情分析師職業(yè)素養(yǎng)初探[J];辦公室業(yè)務;2014年15期

2 馬海兵;畢久陽;邱君瑞;;網絡輿情安全應用中主題分類方法的研究與實現(xiàn)[J];現(xiàn)代情報;2012年04期

3 肖文濤;范達超;;網絡輿情事件的引導策略探究[J];中國行政管理;2011年12期

4 羅愛民;;信息系統(tǒng)體系結構的復雜性分析方法[J];計算機科學;2011年10期

5 梅松;;政府網絡輿情監(jiān)控系統(tǒng)的實現(xiàn)[J];信息技術;2011年09期

6 王青;成穎;巢乃鵬;;網絡輿情監(jiān)測及預警指標體系構建研究[J];圖書情報工作;2011年08期

7 李云云;;淺析B/S和C/S體系結構[J];科學之友;2011年01期

8 趙靖;劉宏偉;崔剛;王慧強;;Analysis on testing and operational reliability of software[J];Journal of Harbin Institute of Technology;2008年03期

9 王維江;面向對象方法的程序設計簡述[J];航空計算技術;2004年02期

本文編號：2673404