91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

hadoop學習筆記1---Hadoop體系介紹

發布時間:2020-08-01 05:51:50 來源:網絡 閱讀:633 作者:斷臂人 欄目:大數據

1、Namenode

HDFS的守護進程

記錄文件時如何分割成數據塊的,以及這些數據塊被存儲到哪些節點上

對內存和I/O進行集中管理

是個單點,發生故障將使集群崩潰


2、Secondary Namenode

監控HDFS狀態的輔助后臺程序

每個集群都有一個

與NameNode進行通訊定期保存HDFS元數據快照

當NameNode故障可以作為備用NameNode使用


3、DataNode

每臺從服務器都運行一個

負責把HDFS數據塊讀寫到本地文件系統


4、JobTracker

用于處理作業(用戶提交代碼)的后臺程序

決定有哪些文件參與處理,然后切割task并分配節點

監控task,重啟失敗的task(于不同的幾點)

每個集群只有唯一一個JobTracker,位于Master節點


5、TaskTracker

位于slave節點上,與datanode結合(代碼與數據一起的原則)

管理各自節點上的task(由jobtracker分配)

每個節點只有一個tasktracker,但一個tasktracker可以啟動多個JVM,用于并行執行map或reduce任務

與jobtracker交互


1.6、Master和Slave

Master:Namenode、Secondary Namenode、jobtracker。瀏覽器(用于觀看管理界面),其它Hadoop工具

Slave:Tasktracker、Datenode

Master不是唯一的


向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

吉林省| 姜堰市| 潞西市| 庆元县| 兖州市| 黔西| 治多县| 柳江县| 巴东县| 邹平县| 如东县| 青铜峡市| 衡阳县| 仙居县| 泸水县| 绵阳市| 安徽省| 阿克| 枣庄市| 喀喇| 固原市| 望都县| 新龙县| 昌图县| 奉节县| 肃宁县| 宿迁市| 卫辉市| 资兴市| 光山县| 江都市| 和龙市| 武隆县| 南郑县| 留坝县| 南江县| 石城县| 托克逊县| 文登市| 都匀市| 云霄县|