在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

您好,歡迎來電子發(fā)燒友網(wǎng)! ,新用戶?[免費注冊]

您的位置:電子發(fā)燒友網(wǎng)>源碼下載>數(shù)值算法/人工智能>

基于MapReduce的并行關聯(lián)規(guī)則挖掘算法

大小:2.04 MB 人氣: 2018-01-10 需要積分:2

  數(shù)據(jù)挖掘( data mining)又稱做知識發(fā)現(xiàn)(knowledge disco-ver in database,KDD),其目的在于發(fā)現(xiàn)大量數(shù)據(jù)集中有價值的隱含信息。常見的數(shù)據(jù)挖掘任務有關聯(lián)規(guī)則挖掘、分類、聚集、離群點檢測等。關聯(lián)規(guī)則挖掘是最重要的數(shù)據(jù)挖掘任務之一,由Agrawal等人提出,其目的是發(fā)現(xiàn)事務(項)之間存在的隱含關聯(lián)。關聯(lián)規(guī)則挖掘一般分為兩個階段,即發(fā)現(xiàn)頻繁項集和根據(jù)頻繁項集產(chǎn)生關聯(lián)規(guī)則。由于根據(jù)頻繁項集產(chǎn)生關聯(lián)規(guī)則相對容易實現(xiàn),所以關聯(lián)規(guī)則挖掘研究主要關注的是如何在數(shù)據(jù)集中找到頻繁出現(xiàn)的項集,這個過程也稱為頻繁項集挖掘( frequent itemsets mining)或頻繁模式挖掘(frequent patterns mining)。傳統(tǒng)的關聯(lián)規(guī)則挖掘算法主要可以分為三類:a)產(chǎn)生測試方法,通過迭代產(chǎn)生候選頻繁項集并進行分別計數(shù),統(tǒng)計得到頻繁項集,典型的算法是Agrawal等人心1提出的算法及其一系列的改進算法,如DHP、DIC等;b)模式增長方法,它不用產(chǎn)生候選項集,而是將所有頻繁項壓縮成一種特殊的數(shù)據(jù)結(jié)構(gòu)(一般為樹結(jié)構(gòu)),通過在數(shù)據(jù)結(jié)構(gòu)上進行遍歷直接產(chǎn)生頻蘩項集,典型的算法有FP-Growth、LP-tree、FIUT、IFP、FPUTPLElol等;c)垂直格式方法,是將水平格式的數(shù)據(jù)集轉(zhuǎn)換成垂直格式,通過交運算來得到頻繁項集,典型的算法有Eclat等。

  隨著信息技術(shù)的快速發(fā)展,需要存儲和分析的數(shù)據(jù)量呈爆炸性增長,人類已經(jīng)進入了大數(shù)據(jù)時代,傳統(tǒng)的關聯(lián)規(guī)則挖掘算法已經(jīng)不能適應大數(shù)據(jù)挖掘的要求,主要困難是:單一計算機無法存儲所需要挖掘的所有數(shù)據(jù)及挖掘過程中產(chǎn)生的中間結(jié)果;挖掘過程所需要的內(nèi)存遠遠超過單一機器的存儲量;計算時間太長無法忍受等。需要開發(fā)分布式、并行關聯(lián)規(guī)則挖掘算法解決上述問題。

  MapReduce是一種由Google于2004年提出的一種易用且功能強大的并行編程模型,具有使用簡單、自動容錯、負載均衡、伸縮性好等優(yōu)點,其開源實現(xiàn)Hadoop已經(jīng)廣泛應用于很多大數(shù)據(jù)分析領域,已經(jīng)有了很多將傳統(tǒng)關聯(lián)規(guī)則挖掘算法向MapReduce模型進行遷移的研究,很大程度上解決了大數(shù)據(jù)關聯(lián)規(guī)則挖掘的問題。這些算法的主要思想都是利用Ha-doop中的分布式文件系統(tǒng)(HDFS)來解決海量數(shù)據(jù)存儲和分片的問題,利用MapReduce未實現(xiàn)挖掘算法的并行執(zhí)行。

基于MapReduce的并行關聯(lián)規(guī)則挖掘算法

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發(fā)表評論

      用戶評論
      評價:好評中評差評

      發(fā)表評論,獲取積分! 請遵守相關規(guī)定!

      ?
      主站蜘蛛池模板: 亚洲偷图色综合色就色 | 日本人zzzwww色视频 | 黄网站色成年片大免费软件 | 国产精品成人一区二区三区 | 男女午夜剧场 | 四虎884tt紧急大通知 | 一级毛片免费全部播放完整 | 亚洲夜夜骑 | 欧美在线观看www | ccav在线永久免费看 | 乱人伦一区二区三区 | 欧美人成网站免费大全 | 国模吧双双大尺度炮交gogo | 黄网站在线播放 | 天天舔天天射 | 欧美三级欧美一级 | 色视频在线观看 | 欧美精品区| 色综合欧美 | 18满xo影院视频免费体验区 | 日本三级午夜 | 成人网男女啪啪免费网站 | 欧美午夜色视频国产精品 | 加勒比精品久久一区二区三区 | 日本午夜视频 | 性欧美视频 | 狠狠色丁香久久婷婷综 | 欧美视频一区在线观看 | wwwwww色| 真爽~张开腿~让我插 | 四虎精品永久在线网址 | 免费爱爱视频 | 天天拍夜夜爽 | 色咪网 | 免费黄色成人 | 久久精品国产免费看久久精品 | 狠狠色狠狠色综合久久一 | 午夜高清 | 深夜网站免费 | aaaaa毛片 | 午夜精品久久久久久久四虎 |