基于Map/Reduce的銀行客戶關(guān)系分析系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)
【文章頁數(shù)】:71 頁
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2.1JAVAEE應(yīng)用工作原理圖
doop分布式系統(tǒng)oop是一個(gè)當(dāng)前非常流行且成熟的分布式系統(tǒng)框架。它旨在幫助用戶內(nèi)部結(jié)構(gòu)的情況下完成并實(shí)現(xiàn)分布式程序。Hadoop是Apache公的的開源框架,實(shí)現(xiàn)了大規(guī)模集群的管理,并在集群上進(jìn)行分布式過Hadoop我們可以組建具有高速運(yùn)算和存儲(chǔ)能力的分布式集群[....
圖2.2HDFS的系統(tǒng)結(jié)構(gòu)示意圖
數(shù)據(jù)傳輸協(xié)調(diào)等工作,NameNode中將存儲(chǔ)所有的文件信息,文件分塊信息和分塊存況信息。集群其他節(jié)點(diǎn)都可以作為DataNode,用于存儲(chǔ)文件數(shù)據(jù)信息,它將文件分lock存儲(chǔ)在他的系統(tǒng)存儲(chǔ)空間中,并按照設(shè)定周期將所其保存的文件存儲(chǔ)統(tǒng)計(jì)信息給NameNode進(jìn)行驗(yàn)證確認(rèn)。C....
圖2.3Map/Reduce數(shù)據(jù)處理過程圖
行內(nèi)數(shù)據(jù)為value的形式作為輸入,然后從行內(nèi)數(shù)據(jù)讀取有用的信個(gè)<key,value>作為Map方法的輸出,Reduce函數(shù)按照key值對(duì)其對(duì)應(yīng)的val整合,生成一個(gè)如<key,(listofvalues)>形式的中間結(jié)果,然后對(duì)每個(gè)key結(jié)果集合list....
圖2.4Hadoop任務(wù)處理機(jī)制示意圖
圖2.4Hadoop任務(wù)處理機(jī)制示意圖2.3Sybase數(shù)據(jù)庫Sybase數(shù)據(jù)是一個(gè)典型的關(guān)系型數(shù)據(jù),可以應(yīng)用在Unix和WindowsNT平臺(tái)的系統(tǒng)上,他雖然名氣小于Oracle和DB2等業(yè)內(nèi)頂級(jí)的數(shù)據(jù)庫,但是國內(nèi)很多大型的企業(yè)都使用它,尤其是在金融....
本文編號(hào):4021857
本文鏈接:http://www.lk138.cn/guanlilunwen/kehuguanxiguanli/4021857.html
下一篇:沒有了