datanode工作机制

原理

datanode工作机制

  1. datanode首次启动后向namenode注册
  2. namenode返回注册成功应答
  3. 每周期向namenode上报所以块信息(每小时)
  4. 心跳消息3秒一次,心跳返回结果带有nn给datanode的命令
  5. 超过10分钟没有联系会自动任务不可用 (2*5min(重新检查心跳)+10心跳时间)

文章作者: ajin
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 ajin !
评论
 上一篇
mapreduce工作流程 mapreduce工作流程
mapreduce工作流程 客户端submit前会获取待处理数据的信息,根据这些参数会生成一个任务分配规划 客户端提交切片信息,程序jar包,任务配置 yarn计算需要启动的maptask的数量 maptask拿到切片后调用inputf
2020-01-22
下一篇 
namenode工作机制 namenode工作机制
原理图 首次启动HDFS,首先加载fsimage,启动前有edits操作,加载完fsimage在执行edits操作, 加载完成后开始交给2nn合并 新来的增删改请求写给edits,先更新文件,在更新内存 一直写导致edits较大,2nn每
2020-01-22
  目录