計(jì)算機(jī)hadoop學(xué)習(xí)過(guò)程個(gè)人總結(jié)
我在本學(xué)期的小組學(xué)習(xí)中主要擔(dān)任的工作是基礎(chǔ)了解hadoop架構(gòu)的工作原理和優(yōu)勢(shì)。并為大家進(jìn)行了hadoop的入門(mén)級(jí)講解。下面我就對(duì)我的學(xué)習(xí)過(guò)程做一個(gè)
總結(jié)。
Hadoop入門(mén)
Hadoop是一個(gè)分布式系統(tǒng)基礎(chǔ)架構(gòu)。用戶可以
……(新文秘網(wǎng)http://m.120pk.cn省略212字,正式會(huì)員可完整閱讀)……
件,使用傳統(tǒng)的系統(tǒng)可能會(huì)花費(fèi)非常長(zhǎng)的時(shí)間,但是使用hadoop就會(huì)解決這一問(wèn)題。Hadoop具有高可靠性、高擴(kuò)展性、高效性、高容錯(cuò)性。Hadoop是由MapReduce實(shí)現(xiàn)的。MapReduce模型就是就是為一個(gè)復(fù)雜的問(wèn)題提供一個(gè)簡(jiǎn)單的接口,將眾多具有相同特征的有用數(shù)據(jù)統(tǒng)一處理,提高程序的并行效率。而MapReduce所完成的就是將隱藏并行化、容錯(cuò)、負(fù)載均衡的那些雜亂細(xì)節(jié)放在一個(gè)庫(kù)中。MapReduce庫(kù)為用戶提供了兩個(gè)函數(shù):Map函數(shù)、Reduce函數(shù)。Map函數(shù)負(fù)責(zé)接受用戶的一個(gè)輸入對(duì),然后找到他們中間的具有相同特征的數(shù)據(jù)。Reduce函數(shù)是由用戶自定義的,用來(lái)統(tǒng)一處理這些數(shù)據(jù)。
個(gè)人感受
說(shuō)實(shí)話,在老師交給我們這個(gè)任務(wù)之前,我們并不能真正說(shuō)清楚什么是云計(jì)算,不理解云計(jì)算的優(yōu)勢(shì)。所以剛開(kāi)始的學(xué)習(xí)是云里霧里的,分不清方向,但是隨著對(duì)MapReduce的學(xué)習(xí),我們漸漸明白了什么是云計(jì)算。明白了云計(jì)算在大數(shù)據(jù)計(jì)算上的優(yōu)勢(shì)。然后漸漸學(xué)習(xí)了hadoop架構(gòu),逐步讓自己對(duì)云計(jì)算有了一個(gè)深入一點(diǎn)的了解。通過(guò)這次的 ……(未完,全文共935字,當(dāng)前僅顯示594字,請(qǐng)閱讀下面提示信息。
收藏《計(jì)算機(jī)hadoop學(xué)習(xí)過(guò)程個(gè)人總結(jié)》)