ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

HDFS基本命令

2021-09-19 12:00:06  阅读:139  来源: 互联网

标签:基本 HDFS 文件 students hadoop dfs 命令 txt data


1.创建目录

hadoop dfs -mkdir /data

hadoop dfs -mkdir -p /data/data1 创建多级目录
image

2.查看文件

hadoop dfs -ls /
image

3.上传文件

hadoop dfs -put /usr/local/data/ /data
image

4.下载文件 get,将hdfs文件下载到linux本地

hadoop dfs -get /data/data/students.txt 下载到当前目录
image

5. 复制 cp

hadoop dfs -cp /data/data/students.txt /data

6. 查看文件内容 cat , 如果数据量比较大,不能使用

hadoop dfs -cat /data/data/students.txt
image

7. 移动 mv, 物理层面文件没有移动,只是改变了元数据(目录结构)

hadoop dfs -mv /data/data/students.txt /

8. 删除文件或者目录 rmr 但其实并没有真正删除,只是一个mv放到了回收站,回收站会自动清理

hadoop dfs -rmr /data/student.txt

image

image

etc下的hadoop配置文件中 cat core-site.xml

image

手动删除回收站

Hadoop dfs -rmr /user/root/.Trash/Current

强制删除,-skipTrash 当需要删除的文件比较大的时候

hadoop dfs -rmr -skipTrash /a

9. 查看文件末尾 tail -f ; 一直等待查看

hadoop dfs -tail /data/data/students.txt

10. 查看文件的大小

hadoop dfs -du -h /data

image

11.hdfs中的文件都是保存datanode子节点上,在子节点上的位置

usr/local/soft/hadoop-2.7.6/tmp/dfs/data/current/BP-626788496-192.168.163.110-163187979/current/finalized/subdir0/subdir0

12.安全模式(在安全模式不能进行修改操作,可以查看)

hadoop dfsadmin -safemode get 用来查看当前hadoop安全模式的开关状态

hadoop dfsadmin -safemode enter 命令是打开安全模式

hadoop dfsadmin -safemode leave 命令是离开安全模式

标签:基本,HDFS,文件,students,hadoop,dfs,命令,txt,data
来源: https://www.cnblogs.com/xjknight/p/15311220.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有