按时间归档:2023年5月25日
-
HDFS角色NameNode之Fsimage文件分析
HDFS角色NameNode之Fsimage文件分析 原创 wx62be9d88ce2942022-07-01 17:58:29博主文章分类:大数据 ©著作权 文章标签 hdfs …
-
HDFS角色NameNode之Edits log文件分析
hdfs oev -p 文件类型 -i 编辑日志 -o 转换后文件输出路径 显示结果如下: 当文件系统客户端进行了写操作(例如创建或移动了文件),这个事务首先在edits log中…
-
HDFS角色NameNode多目录配置
HDFS角色NameNode多目录配置 原创 wx62be9d88ce2942022-07-01 17:58:44博主文章分类:大数据 ©著作权 文章标签 hdfs hadoop …
-
HDFS角色SecondaryNameNode
存在的意义edits log会随着对文件系统的操作而无限制地增长,这对正在运行的NameNode而言没有任何影响,如果NameNode重启,则需要很长的时间执行edits log的…
-
HDFS角色NameNode故障处理
NameNode故障后,可以采用如下两种方法恢复数据。1)将SecondaryNameNode中数据拷贝到NameNode存储数据的目录;(1)kill -9 NameNode进程…
-
HDFS角色DataNode
1 工作机制 一个数据块在DataNode上以文件形式存储在磁盘上,包括两个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的校验和,以及时间戳。 DataNode启动后…
-
HDFS之JavaAPI创建目录
HDFS之JavaAPI创建目录 原创 wx62be9d88ce2942022-07-01 17:59:12博主文章分类:大数据 ©著作权 文章标签 hdfs java hadoo…
-
HDFS之JavaAPI下载文件
HDFS之JavaAPI下载文件 原创 wx62be9d88ce2942022-07-01 17:59:18博主文章分类:大数据 ©著作权 文章标签 hdfs java hadoo…
-
HDFS之JavaAPI文件改名和移动
HDFS之JavaAPI文件改名和移动 原创 wx62be9d88ce2942022-07-01 17:59:27博主文章分类:大数据 ©著作权 文章标签 hdfs java ha…
-
HDFS之JavaAPI上传文件
HDFS之JavaAPI上传文件 原创 wx62be9d88ce2942022-07-01 17:59:29博主文章分类:大数据 ©著作权 文章标签 hdfs java hadoo…