`
zhangjun5965
  • 浏览: 11985 次
社区版块
存档分类
最新评论
文章列表

hadoop源码解析之hdfs写数据全流程分析---创建文件

hadoophdfs源码读文件
概述 DFSClient创建文件 namenode创建文件     http://zhangjun5965.iteye.com/admin/blogs/2386382 概述

hadoop2.7.3源码解析之datanode注册和心跳机制

hadoophdfs心跳注册源码
datanode注册和心跳 datanode注册 datanode心跳 namenode接收注册和心跳信息 DatanodeManager简单介绍 namednoe接收注册的信息 namenode 接收心跳信息  http://zhangjun5965.iteye.com/admin/blogs/2386384 datanode注册和心跳 在hadoop启动的时候 ...

hadoop源码解析之hdfs写数据全流程分析---客户端处理

hadoophdfs源码读数据
DFSOutputStream介绍 DFSOutputStream概况介绍 DFSOutputStream重要的变量 数据处理线程类DataStreamer 响应处理类ResponseProcessor 处理流程 客户端发数据到dataQueue DataStreamer处理dataQueue中的数据 处理错误 创建输出数据流，发送数据 向namenode申请数据块 连接到第一个datanode 建立管道 初始化数据流

hadoop源码解析之hdfs内部结构分析

hadoop源码分析结构hdfs 
概述 命名空间Namesystem 文件目录管理 i-node介绍 linux i-node介绍 hdfs的 INode介绍 INodeFile INodeDirectory 块管理 数据块BlockInfoContiguous 集群中所有的块的管理 DatanodeStorageInfo 数据节点存储 总结  http://zhangjun5965.iteye.com/blog/2377005

hadoop源码解析之hdfs读取数据全流程分析

hadoophdfs读数据源码流程 
概述 DataXceiverServer介绍 了解DataXceiverServer 初始化工作 工作原理 DataXceiver介绍 Op类介绍 处理逻辑 BlockSender 读取数据 传统方式实现数据传输 零拷贝实现数据传输 原理 具体操作 客户端读数据流程分析 java api读取数据 构造DFSInputStream

hadoop源码学习之namenode启动

hadoop源码namenode解析
概述 namenode格式化 namenode的启动 整体流程 服务启动流程详解 pendingReplications datanodeManager replicationThread blockReportThread   概述

hadoop源码解析之RPC分析

hadooprpc源码解析最新 
前言 准备工作 定义接口 实现接口 启动一个server 构建一个client的代理 执行相应的方法。 Server底层实现 内部类介绍 Call Connection。 Handler Listener Reader Responder Server的启动
Global site tag (gtag.js) - Google Analytics