發(fā)布時間：2018-04-01 10:24

  本文選題：通信行為分析　切入點：大數(shù)據(jù)處理策略　出處：《吉林大學》2017年碩士論文

【摘要】：隨著計算機技術的蓬勃發(fā)展和創(chuàng)新,互聯(lián)網(wǎng)技術早已深入到了我們生活的方方面面,“互聯(lián)網(wǎng)+”的概念悄然興起,已成為各行業(yè)發(fā)展的“新常態(tài)”。2017年1月,中國互聯(lián)網(wǎng)絡信息中心(CNNIC)公布了第39次全國互聯(lián)網(wǎng)發(fā)展統(tǒng)計報告,報告顯示,截至2016年12月,我國網(wǎng)民規(guī)模已達7.31億,手機網(wǎng)民規(guī)模達6.95億,較2015年底增長7550萬人。移動互聯(lián)網(wǎng)使用人數(shù)持續(xù)增多,網(wǎng)絡數(shù)據(jù)的爆發(fā)式增長仍未停歇,如何處理對這些大數(shù)據(jù)進而挖掘其潛在規(guī)律和應用價值,越來越受到各行各業(yè)的重視。在如今這個時代,數(shù)據(jù)是信息世界里最有價值的資產(chǎn),而大數(shù)據(jù)是信息技術產(chǎn)業(yè)的又一次重大技術變革,具有里程碑式的意義,可以預見的是,大數(shù)據(jù)將越來越多的在各領域產(chǎn)生巨大影響,為該領域發(fā)展開拓一條新的道路。從CPU內(nèi)部指令集間的指令傳輸?shù)饺祟惖幕鹦翘綔y工程,通信成了信息時代最基本的元素,數(shù)據(jù)的產(chǎn)生離不開各種各樣的通信行為,物聯(lián)網(wǎng)和移動互聯(lián)網(wǎng)的飛速發(fā)展,使得通信所產(chǎn)生的數(shù)據(jù)更加多樣化,如何準確、快速從天量網(wǎng)絡數(shù)據(jù)中挖掘出用戶的通信行為信息,找出并總結(jié)其通信行為特點,從而為網(wǎng)絡管理、網(wǎng)絡監(jiān)控、設備的策略管理提供幫助成了值得關注的問題,需要注意的是,這里所研究的用戶“通信行為”,不僅僅是“人”的,也可以是智能設備、網(wǎng)絡終端、虛擬環(huán)境等一切可以產(chǎn)生通信行為的“客體”的行為。在這種背景下,本文針對目前大數(shù)據(jù)的發(fā)展趨勢,學習研究目前流行的大數(shù)據(jù)處理架構(gòu),確定使用Hadoop分布式架構(gòu)作為系統(tǒng)的基礎平臺,并比較各種通信行為分析模式,以了解掌握整個網(wǎng)絡環(huán)境下各類用戶通信行為為目標,深入研究TCP/IP參考模型的各層各類網(wǎng)絡協(xié)議,針對用戶的通聯(lián)關系、通信規(guī)律、常規(guī)網(wǎng)絡行為等方面,結(jié)合Hadoop分布式處理存儲技術和網(wǎng)絡協(xié)議重組還原技術,研究設計并實現(xiàn)了一套通信行為分析的大數(shù)據(jù)處理系統(tǒng),實現(xiàn)在大數(shù)據(jù)中重組還原所需協(xié)議并找出相關通聯(lián)信息等功能,并對網(wǎng)絡通聯(lián)情況、協(xié)議使用情況、網(wǎng)站瀏覽情況、郵件收發(fā)情況等網(wǎng)絡通信元數(shù)據(jù)進行統(tǒng)計,實現(xiàn)對整體網(wǎng)絡通信情況的掌握,也可針對需要的特定用戶、特定通信行為進行分析,了解其通信行為,掌握其通信規(guī)律。本系統(tǒng)旨在為網(wǎng)絡管理者提供更為詳實準確的網(wǎng)絡通信行為信息,幫助網(wǎng)絡管理者在大數(shù)據(jù)背景下更好的監(jiān)督網(wǎng)絡通信行為,為科學高效的網(wǎng)絡管理模式提供堅實有力的保障。
[Abstract]:With the rapid development and innovation of computer technology, Internet technology has already penetrated into all aspects of our lives. The concept of "Internet" has emerged quietly and has become the "new normal" of the development of various industries. The China Internet Network Information Center (CNNIC) has released the 39th National Statistics report on Internet Development. The report shows that as of December 2016, the number of Internet users in China has reached 731 million and the number of mobile Internet users has reached 695 million. The number of people using the mobile Internet continues to increase, and the explosive growth of network data has not stopped. How to deal with these big data and then tap its potential laws and application value, In this era, data is the most valuable asset in the information world, and big data is another major technological change in the information technology industry. Big data will have more and more tremendous influence in various fields, opening up a new way for the development of this field. From the instruction set within the CPU to the Mars exploration project of mankind, communication has become the most basic element of the information age. The generation of data can not be separated from a variety of communication behaviors. With the rapid development of the Internet of things and the mobile Internet, the data generated by communication become more diversified. To find out and summarize the characteristics of communication behavior, so as to provide help for the policy management of network management, network monitoring and equipment management, has become a matter of concern. What should be noted is that the "communication behavior" of users studied here is not only "human". It can also be the behavior of intelligent devices, network terminals, virtual environments and all other "objects" that can produce communication behavior. In this context, this paper studies and studies the current popular big data processing framework in view of big data's current development trend. It is decided to use the Hadoop distributed architecture as the basic platform of the system, and to compare various communication behavior analysis models, in order to understand all kinds of user communication behavior under the entire network environment as the goal, and deeply study all kinds of network protocols of the TCP/IP reference model. In this paper, a big data processing system for communication behavior analysis is designed and implemented based on Hadoop distributed processing storage technology and network protocol recombination and restore technology, aiming at the connection relationship, communication rules and general network behavior of users. To achieve the functions of reorganizing and restoring the required protocols in big data and finding relevant communication information, and statistics on network communication metadata, such as network communication, protocol usage, website browsing, mail sending and receiving, etc. To realize the mastering of the overall network communication situation, but also to analyze the specific communication behavior of the specific users who need it, to understand their communication behavior, The purpose of this system is to provide network managers with more detailed and accurate information on network communication behavior, and to help network managers better supervise network communication behavior under the background of big data. For the scientific and efficient network management model to provide a solid and effective protection.
【學位授予單位】：吉林大學
【學位級別】：碩士
【學位授予年份】：2017
【分類號】：TP311.13

【相似文獻】

相關期刊論文 前10條

1 張連臣;郵電用戶購買行為分析[J];郵電企業(yè)管理;1994年10期

2 賴幸;賀艷燕;;“80后”的消費行為分析及其營銷策略探討[J];新聞傳播;2011年02期

3 ;Radware DefensePro4.0增服務器行為分析[J];每周電腦報;2007年41期

4 吳永武;錢淑渠;王海英;符祖峰;;公共場景中運動目標的行為分析[J];計算機仿真;2014年06期

5 馬萌;于重重;陳鈞;郭雪;;基于行為分析的籃球領域規(guī)律挖掘的應用研究[J];計算機仿真;2014年05期

6 鐘燕;;網(wǎng)上零售業(yè)消費者行為分析[J];經(jīng)營管理者;2010年15期

7 田西柱;;基于高密度人群的人流行為分析[J];物聯(lián)網(wǎng)技術;2013年12期

8 Mikael E.Bj·rling;Jennie Carlsten;Piotr Kessler;Erik Kruse;jMats Stille;;消費者行為分析:多媒體豐富通信最為期待[J];互聯(lián)網(wǎng)天地;2006年11期

9 ;NCR推出保險業(yè)CRM解決方案[J];金融電子化;2001年06期

10 李冠強,陳雅,李強;中國互聯(lián)網(wǎng)用戶網(wǎng)絡使用行為分析[J];中國圖書館學報;2004年05期

相關會議論文 前10條

1 程介克;;探索腦化學——行為分析化學[A];第四屆海峽兩岸分析化學學術會議論文集[C];2006年

2 母愛英;武建奇;;京津冀都市圈管治中政府行為分析[A];河北省首屆社會科學學術年會論文專輯[C];2007年

3 佟瑞鵬;厙麗飛;劉佳;杜博;劉凱;;緊急狀態(tài)下密集人群高風險行為分析[A];第二十屆海峽兩岸及香港、澳門地區(qū)職業(yè)安全健康學術研討會暨中國職業(yè)安全健康協(xié)會2012學術年會論文集[C];2012年

4 徐越;;浙江省1542名初中學生嘗試吸煙行為分析[A];履行框架公約 創(chuàng)建無煙環(huán)境——第13屆全國吸煙與健康學術研討會暨第三屆煙草控制框架公約論壇論文集[C];2007年

5 吳有富;沈俊;代模;;交通目標檢測及它們的行為分析(英文)[A];第二屆貴州省自然科學優(yōu)秀學術論文評選獲獎論文集（2007年）[C];2007年

6 熊國強;;企業(yè)清潔能源生產(chǎn)的經(jīng)濟行為分析[A];新世紀 新機遇 新挑戰(zhàn)——知識創(chuàng)新和高新技術產(chǎn)業(yè)發(fā)展（下冊）[C];2001年

7 張芮;胡影;鄭康鋒;;基于行為分析的惡意代碼潛伏性評估方法[A];2013年中國信息通信研究新進展論文集[C];2014年

8 汪定偉;;分組的多屬性逆向拍賣的評標行為分析[A];第五屆（2010）中國管理學年會——信息管理分會場論文集[C];2010年

9 馮立偉;戴耀華;張延峰;張淑一;張帥明;;藥店與兒童合理用藥關系初探——偽裝腹瀉患兒家長藥店購藥行為分析[A];2008年中國藥學會學術年會暨第八屆中國藥師周論文集[C];2008年

10 李麗純;;基于經(jīng)濟利益圓周假說的農(nóng)民專業(yè)合作行為分析[A];2006年湖南社科聯(lián)學科前沿問題研究論壇論文集[C];2006年

相關重要報紙文章 前10條

1 本報記者 呂志強 通訊員 楊敬忠;農(nóng)行浙江分行堅持員工行為分析評價[N];中國城鄉(xiāng)金融報;2007年

2 孟祥妲;個人行為分析是房地產(chǎn)問題的出發(fā)點(系列之二)[N];中華建筑報;2011年

3 格上理財研究中心 歐陽嵐;資管行業(yè)客戶投資需求行為分析[N];企業(yè)家日報;2014年

4 恒泰證券 于冬旭;中小投資者非理性交易行為分析[N];證券時報;2012年

5 ;網(wǎng)絡行為分析洞察助力中國CMO[N];網(wǎng)絡世界;2012年

6 山東旅游職業(yè)學院 王煜琴 韓國華 宋云衫;山東省游客消費行為分析與啟示[N];中國旅游報;2013年

7 ;兩個女報人的生養(yǎng)行為分析[N];北京科技報;2004年

8 周躍;湖南移動“商易通”惠民便民[N];人民郵電;2008年

9 查淑琦;不可估量的籌碼[N];中國經(jīng)營報;2002年

10 浙江師范大學旅游與資源管理學院 駱高遠;中國公民旅游不文明行為分析及其治理對策[N];江南游報;2006年

相關博士學位論文 前1條

1 王志忠;可持續(xù)發(fā)展的行為分析與制度安排[D];南京農(nóng)業(yè)大學;2004年

相關碩士學位論文 前10條

1 吳沛;柔性電子系統(tǒng)中島-橋結(jié)構(gòu)的力學行為分析與數(shù)值模擬[D];哈爾濱工業(yè)大學;2015年

2 岑斐;設計新手與專家的類比推理行為分析[D];浙江大學;2015年

3 任旭龍;基于復雜背景的運動人體檢測及行為分析研究[D];北京理工大學;2015年

4 張躍騫;基于程序行為分析的主機異常監(jiān)測系統(tǒng)的設計與實現(xiàn)[D];北京工業(yè)大學;2015年

5 苗青鵬;基于網(wǎng)絡行為分析的網(wǎng)絡管理系統(tǒng)設計與實現(xiàn)[D];電子科技大學;2014年

6 姜秋生;VMI技術在軟件行為分析中的應用研究[D];西安工業(yè)大學;2013年

7 王汝軍;基于大數(shù)據(jù)的移動互聯(lián)網(wǎng)行為分析[D];南京郵電大學;2015年

8 張冰冰;視頻中的人體行為分析關鍵技術研究[D];長春工業(yè)大學;2016年

9 陳賀男;基于行為分析的擺渡木馬檢測技術研究[D];北京交通大學;2016年

10 陳瑤琳;基于行為分析的云安全免疫系統(tǒng)關鍵技術研究[D];廣西大學;2016年

，

本文編號：1695172