鍍金池/ 教程/ 大數(shù)據(jù)/ HDFS - 可靠性
YARN - Failover
MapReduce - Shuffle
Hadoop配置
MapReduce - 讀取數(shù)據(jù)
Hadoop - MapReduce
YARN - Container
Hadoop 測試
MapReduce - Mapper
Hadoop - 參考
YARN - ResourceManager
HDFS - 可靠性
HDFS - 讀文件
Hadoop - 簡介
YARN - ApplicationMaster
Hadoop - IO
Hadoop 監(jiān)控
MapReduce - 編程
Hadoop - YARN
Hadoop - HDFS
HDFS - 命令工具
HDFS - 寫文件
YARN - NodeManager
Hadoop安裝

HDFS - 可靠性

  1. DataNode可以失效

    DataNode會定時發(fā)送心跳到NameNode。如果?#x5728;一段時間內(nèi)NameNode沒有收到DataNode的心跳消息,則認為其失效。此時NameNode就會將該節(jié)點的數(shù)據(jù)(從該節(jié)點的復制節(jié)點中獲?。椭频搅硗獾腄ataNode中

  2. 數(shù)據(jù)可以毀壞

    無論是寫入時還是硬盤本身的問題,只要數(shù)據(jù)有問題(讀取時通過校驗碼來檢測),都可以通過其他的復制節(jié)點讀取,同時還會再復制一份到健康的節(jié)點中

  3. NameNode不可靠