HDFS,是一種常用的分布式文件操作系統(tǒng),要使用大數(shù)據(jù),我們需要非常熟悉HDFS客戶端操作,下面,我們一起來看下哦!
1. 查看hdfs中的目錄和文件信息
hdfs fs -ls /hdfs路徑
如:hdfs fs -ls /aaa/xxx/
hdfs fs -ls -R / #遞歸顯示指定位置下的所有文件和文件夾
2. 上傳文件到hdfs中
(1)hdfs fs -put test.txt /
(2)hdfs fs -copyFromLocal test.txt /test.txt.2
同時,在上傳文件時,可以進行重命名。
(3)hdfs fs -moveFromLocal /本地文件 /hdfs路徑
說明:使用最多的是put命令
3. 下載文件到客戶端本地磁盤
hdfs fs -get /hdfs中的路徑 /本地磁盤目錄
hdfs fs -copyToLocal /hdfs中的路徑 /本地磁盤路徑 # 與get等價
如:
hdfs fs -get /test.txt.2
hdfs fs -copyToLocal /test.txt.2
其中,使用最多的就是get命令
4. 在hdfs中創(chuàng)建文件夾
hdfs fs -mkdir /aaa
hdfs fs -mkdir -p /bbb/xxx # 創(chuàng)建層級目錄結構
hdfs fs -mkdir /{aa,bb} #同時創(chuàng)建多個目錄
5. 拷貝文件
hdfs fs -cp /test.txt /bbb/
6. 移動hdfs中的文件(或更名)
hdfs fs -mv /test.txt.2 /test.txt.3
hdfs fs -mv /test.txt.3 /bbb/test.txt.4
7. 刪除hdfs中的文件或文件夾
hdfs fs -rm -r /aaa
8. 追加內(nèi)容到已存在的文件
hdfs fs -appendToFile /本地文件 /hdfs中的文件
9. 顯示文本文件的內(nèi)容
hdfs fs -cat /test.txt
hdfs fs -tail /test.txt #顯示文件末尾
10. 下載多個文件在本地生成一個合并文件
hdfs fs -getmerge /test/*.dat ./xx.dat
11. 修改文件的權限
hdfs fs -chown user:group /aaa
hdfs fs -chmod 700 /aaa
>>本文地址:http://hqfphsz.com/zhuanye/2020/48503.html
聲明:本站稿件版權均屬中公教育優(yōu)就業(yè)所有,未經(jīng)許可不得擅自轉載。
1 您的年齡
2 您的學歷
3 您更想做哪個方向的工作?