隨著煤礦企業(yè)規(guī)模的擴大和信息化水平的不斷提高,在經(jīng)營管理過程中產(chǎn)生了海量的業(yè)務數(shù)據(jù),如何有效地管理和重組數(shù)據(jù)資源,提煉出有價值的信息以供決策使用,成為當前煤炭行業(yè)“大數(shù)據(jù)”發(fā)展過程中面臨的一大難題,而建立基于多維數(shù)據(jù)倉庫技術的礦井信息化系統(tǒng)是解決這一問題的有效途徑。本文針對煤礦企業(yè)生產(chǎn)運營特點,結合礦井數(shù)據(jù)多源、異構的特殊性,對數(shù)據(jù)倉庫架構和ETL(Extract,Transform,Load)算法兩方面進行系統(tǒng)研究,分別提出了適合礦井數(shù)據(jù)特點的改進方法,最后以大屯煤電公司綜合調(diào)度信息管理系統(tǒng)為例,設計實現(xiàn)了礦井多維數(shù)據(jù)倉庫系統(tǒng)。論文主要工作如下:(1)在數(shù)據(jù)倉庫架構方面,分析傳統(tǒng)數(shù)據(jù)倉庫架構中存在的不足,設計了一種基于多數(shù)據(jù)集市的礦井多維數(shù)據(jù)倉庫模型,各數(shù)據(jù)集市之間通過共同維加強聯(lián)系。提出一種利用二次集成簡化開發(fā),優(yōu)化數(shù)據(jù)結構的數(shù)據(jù)倉庫/數(shù)據(jù)集市體系結構的改進方法。(2)在ETL算法方面,設計基于元數(shù)據(jù)的改良實時ETL過程,提出了一種基于數(shù)據(jù)質(zhì)量控制的實時ETL改進算法,實驗表明:基于系統(tǒng)數(shù)據(jù)日志的實時ETL算法實現(xiàn)了對數(shù)據(jù)倉庫與業(yè)務系統(tǒng)之間數(shù)據(jù)共享零延時的要求;增加了問題數(shù)據(jù)處理模... 

【文章來源】：中國礦業(yè)大學江蘇省 211工程院校 教育部直屬院校

【文章頁數(shù)】：70 頁

【學位級別】：碩士

【部分圖文】：

傷亡事故登記界面

圖 4-5 傷亡事故數(shù)據(jù)表Figure 4-5 Casualty and accident data table后，系統(tǒng)會根據(jù)登錄ID自動記錄錄入者的隊別（TeamID）數(shù)據(jù)記錄一個編號（Num），方便日后的查詢修改操作。要包括兩部分：亡事故為例，模擬日志生成的過程；日志觀察器對整個 ETL 過程進行監(jiān)控。的日志記錄：錄了數(shù)據(jù)庫中對數(shù)據(jù)的每次操作，如 19:00 select 事故單位，事故類別，受傷程度 from 傷亡 20:00 update 傷亡事故表 set 受傷程度=死亡故編號=1000001；員 B；的日志為平面文件，數(shù)據(jù)倉庫系統(tǒng)會根據(jù)需求每隔固定得注意的是數(shù)據(jù)庫中數(shù)據(jù)的格式必須要與系統(tǒng)記錄日志的

圖 5-3 生產(chǎn)記錄日報表Figure 5-3 Daily report of production records.3.2 事故安全記錄模塊事故安全記錄主要包括傷亡事故記錄和非傷亡事故記錄（設備運行記錄）兩大，它集成了公司四個主礦井的傷亡事故情況，可依據(jù)事故的類別、所在單位、受度、發(fā)生時間在多個數(shù)據(jù)集市之間進行交叉查詢。對于發(fā)生的一些重大傷亡事故設備故障將會實時展現(xiàn)在信息管理系統(tǒng)中，而一些日常安全情況匯報會在數(shù)據(jù)倉進行匯總后每天發(fā)布一次，頁面顯示如圖 5-4 所示。這些數(shù)據(jù)的支持，有助于企策者及時發(fā)現(xiàn)設備故障，并可通過對事故多發(fā)地段、事故多發(fā)類型等信息的分定相應預案，有效避免一部分礦井事故的發(fā)生。

【參考文獻】：
期刊論文
[1]數(shù)據(jù)倉庫技術在銀行經(jīng)營決策中的應用研究[J]. 崔敬東,高慶成.  西南金融. 2014(02)
[2]數(shù)據(jù)倉庫技術在移動通信中的應用分析[J]. 何竺樺.  通訊世界. 2013(17)
[3]基于數(shù)據(jù)質(zhì)量控制的ETL[J]. 孫水華,劉建華,林志強.  福建工程學院學報. 2011(04)
[4]ETL系統(tǒng)的設計及其研究[J]. 畢錕,劉軍.  軟件導刊. 2010(05)
[5]基于數(shù)據(jù)倉庫的ETL過程優(yōu)化[J]. 彭璐.  計算機與數(shù)字工程. 2010(05)
[6]面向數(shù)據(jù)質(zhì)量的ETL框架的設計與實現(xiàn)[J]. 李慶陽,彭宏.  計算機工程與設計. 2010(09)
[7]數(shù)據(jù)挖掘:企業(yè)信息化建設的必經(jīng)之路[J]. 喻聲頻.  生產(chǎn)力研究. 2009(17)
[8]基于本體的ETL設計研究[J]. 吳飛,邢桂芬,邢玉萍.  計算機工程與設計. 2007(07)
[9]數(shù)據(jù)倉庫/數(shù)據(jù)集市體系結構的改進[J]. 潘寶娟.  現(xiàn)代計算機. 2006(12)
[10]大型數(shù)據(jù)倉庫實現(xiàn)技術的研究[J]. 陳慧萍,陳嵐峰,王建東.  計算機工程與設計. 2006(21)

博士論文
[1]企業(yè)集團數(shù)據(jù)倉庫系統(tǒng)關鍵技術研究[D]. 宋旭東.大連理工大學 2010
[2]三峽庫區(qū)地質(zhì)災害數(shù)據(jù)倉庫與數(shù)據(jù)挖掘應用研究[D]. 朱傳華.中國地質(zhì)大學 2010

碩士論文
[1]中國郵政速遞數(shù)據(jù)倉庫系統(tǒng)ETL的設計與實現(xiàn)[D]. 張建興.北京交通大學 2014
[2]空間數(shù)據(jù)倉庫的設計與構建[D]. 梁大圣.山東農(nóng)業(yè)大學 2010
[3]基于數(shù)據(jù)倉庫的煤礦決策支持系統(tǒng)研究[D]. 徐振華.北京交通大學 2010
[4]人壽保險數(shù)據(jù)倉庫的設計與實現(xiàn)[D]. 潘曉輝.哈爾濱工程大學 2008
[5]基于數(shù)據(jù)倉庫體系結構的OLAP和數(shù)據(jù)挖掘技術的研究與應用[D]. 張佳民.吉林大學 2008
[6]粗糙集理論在數(shù)據(jù)預處理中的應用研究[D]. 劉永超.大連理工大學 2007
[7]面向?qū)崟r數(shù)據(jù)倉庫的ETL研究[D]. 徐春艷.南京航空航天大學 2007
[8]我國企業(yè)管理信息化問題研究[D]. 彭常青.吉林大學 2006
[9]數(shù)據(jù)倉庫在煤炭系統(tǒng)的應用研究[D]. 王峰.遼寧工程技術大學 2004



本文編號：2935405