hadoop,  个人笔记

hdfs文件系统文件结构

core-site.xml:
<name>hadoop.tmp.dir</name>:
<value>/home/zjy/hadoop/tmp</value>    //namenode管理的临时目录  这个value可以配置成用,号分隔的多个目录,用于备份namenode的数据。
例
<value>/home/zjy/hadoop/tmp,/home/zjy/hadoop/namenodebak</value>   
--
hdfs.site.xml

<name>dfs.name.edits.dir</name>
<value>${dfs.name.dir}</value>      //edits的目录配置。
<name>dfs.replication</name>
<value>3</value>      //文件的备份副本数

zjy@YFCS-S6-APP:/home/zjy/hadoop/tmp/dfs$l
drwx------ 3 zjy users 4096 11月 11 10:24 data                //datanode操作目录
drwxr-xr-x 3 zjy users 4096 11月 11 10:42 name                //namenode 操作目录
drwxr-xr-x 3 zjy users 4096 11月 11 10:42 namesecondary        //namenode备份目录  冷备份不是实时的。

-rw-r--r-- 1 zjy users      17 11月 11 10:42 in_use.lock      //锁文件,表示谁能操作这个目录
drwxr-xr-x 2 zjy users 1236992 11月 20 16:46 current           //当前操作
zjy@YFCS-S6-APP:/home/zjy/hadoop/tmp/dfs/name$
zjy@YFCS-S6-APP:/home/zjy/hadoop/tmp/dfs/name$more in_use.lock
19565@YFCS-S6-APP                                              //只有19565这个进程号可以操作这个目录

zjy@YFCS-S6-APP:/home/zjy/hadoop/tmp/dfs/name/current$
-rw-r--r-- 1 zjy users      62 11月 10 09:42 fsimage_0000000000000000000.md5    //fsimage 表示namenode 的镜像
-rw-r--r-- 1 zjy users     350 11月 10 09:42 fsimage_0000000000000000000                
-rw-r--r-- 1 zjy users     204 11月 11 10:24 VERSION                             //当前HDFS的文件版本号
-rw-r--r-- 1 zjy users      62 11月 11 10:24 fsimage_0000000000000002955.md5
-rw-r--r-- 1 zjy users     351 11月 11 10:24 fsimage_0000000000000002955
-rw-r--r-- 1 zjy users       6 11月 20 16:49 seen_txid
-rw-r--r-- 1 zjy users 1048576 11月 20 16:49 edits_inpro                        //edits 记录上传文件的过程。
hdfs文件系统文件结构已关闭评论