首頁技術(shù)文章正文

Hadoop有幾種運(yùn)行模式?各種模式都有哪些特性?

更新時(shí)間:2021-04-02 來源:黑馬程序員 瀏覽量:

1577370495235_學(xué)IT就到黑馬程序員.gif


Hadoop有三種運(yùn)行模式:獨(dú)立(本地)運(yùn)行模式,偽分布式模式,和完全分布式模式。

(1)獨(dú)立(本地)運(yùn)行模式:安裝簡單,幾乎不用做任何配置,但僅限于調(diào)試用途。無需任何守護(hù)進(jìn)程,所有的程序都運(yùn)行在同一個(gè)JVM上執(zhí)行。在獨(dú)立模式下調(diào)試MR程序非常高效方便。所以一般該模式主要是在學(xué)習(xí)或者開發(fā)階段調(diào)試使用 。

(2)偽分布式模式:在單節(jié)點(diǎn)上同時(shí)啟動namenode、datanode、jobtracker、tasktracker、secondarynamenode等5個(gè)進(jìn)程,模擬分布式運(yùn)行的各個(gè)節(jié)點(diǎn)。Hadoop守護(hù)進(jìn)程運(yùn)行在本地機(jī)器上,模擬一個(gè)小規(guī)模的集群,換句話說,可以配置一臺機(jī)器的Hadoop集群,偽分布式是完全分布式的一個(gè)特例。

(3)完全分布式模式:正常的Hadoop集群,由多個(gè)各司其職的節(jié)點(diǎn)構(gòu)成。Hadoop守護(hù)進(jìn)程運(yùn)行在一個(gè)集群上。

注意:開發(fā)環(huán)境,使用獨(dú)立模式;測試環(huán)境,可以使用偽分布式模式;線上生產(chǎn)環(huán)境,使用完全分布式模式。






猜你喜歡:

Hadoop生態(tài)體系有哪些子系統(tǒng)?

Zookeeper集群中的三種角色簡單介紹

Hadoop實(shí)現(xiàn)join的幾種方法【大數(shù)據(jù)開發(fā)面試】    

Hadoop虛擬機(jī)怎樣遠(yuǎn)程登錄和開啟SSH免密登錄功能?

黑馬程序員大數(shù)據(jù)培訓(xùn)

分享到:
在線咨詢 我要報(bào)名
和我們在線交談!