hdfs的客户端操作

客户端的理解

hdfs的客户端有多种形式:

  1. 网页形式
  2. 命令行形式
  3. 客户端在哪里运行,没有约束,只要运行客户端的机器能够跟hdfs集群联网

文件的切块大小和存储的副本数量,都是由客户端决定!

所谓的由客户端决定,是通过配置参数来定的

hdfs的客户端会读以下两个参数,来决定切块大小、副本数量:

切块大小的参数: dfs.blocksize

副本数量的参数: dfs.replication

上面两个参数应该配置在客户端机器的hadoop目录中的hdfs-site.xml中配置

dfs.blocksize

64m

dfs.replication

2

hdfs客户端的常用操作命令

  1. 上传文件到hdfs中

hadoop fs -put /本地文件  /aaa

  1. 下载文件到客户端本地磁盘

hadoop fs -get /hdfs中的路径   /本地磁盘目录

  1. 在hdfs中创建文件夹

hadoop fs -mkdir  -p /aaa/xxx

  1. 移动hdfs中的文件(更名)

hadoop fs -mv /hdfs的路径1  /hdfs的另一个路径2

复制hdfs中的文件到hdfs的另一个目录

hadoop fs -cp /hdfs路径_1  /hdfs路径_2

  1. 删除hdfs中的文件或文件夹

hadoop fs -rm -r /aaa

  1. 查看hdfs中的文本文件内容

hadoop fs -cat /demo.txt

hadoop fs -tail -f /demo.txt

你可能感兴趣的:(Hadoop,hadoop,hive,hbase,spark,storm)