基于MapReduce和Spark的大數(shù)據(jù)主動學(xué)習(xí)比較研究
作者：翟俊海; 齊家興; 沈矗; 宋丹丹; 王謨瀚; 田石 河北省機(jī)器學(xué)習(xí)與計算智能重點實驗室; 河北保定071002; 河北大學(xué)數(shù)學(xué)與信息科學(xué)學(xué)院; 河北保定071002
摘要：在我們以前的工作中,提出了基于MapReduce的大數(shù)據(jù)主動學(xué)習(xí)算法。在本文中,將這一算法移植到Spark環(huán)境,提出了基于Spark的大數(shù)據(jù)主動學(xué)習(xí)算法,并對基于MapReduce和Spark的2種大數(shù)據(jù)主動學(xué)習(xí)算法從運行時間、文件數(shù)目、同步數(shù)目和內(nèi)存耗費4個方面進(jìn)行了比較研究,得出了一些有價值的結(jié)論,這些結(jié)論將為相關(guān)研究人員提供很好的幫助。
注：因版權(quán)方要求，不能公開全文，如需全文，請咨詢雜志社。
計算機(jī)工程與科學(xué)雜志
計算機(jī)工程與科學(xué)雜志， 月刊，本刊重視學(xué)術(shù)導(dǎo)向，堅持科學(xué)性、學(xué)術(shù)性、先進(jìn)性、創(chuàng)新性，刊載內(nèi)容涉及的欄目：算法研究、圖形與圖象、計算機(jī)網(wǎng)絡(luò)、神經(jīng)網(wǎng)絡(luò)、仿真技術(shù)研究、人工智能、研究與實現(xiàn)、試題選載與博士論文摘要等。于1973年經(jīng)新聞總署批準(zhǔn)的正規(guī)刊物。
- 北大期刊
- CSCD期刊
- 統(tǒng)計源期刊
- 1-3個月審核
