• Linux常用命令(Hadoop)


    文章目录
    hdfs命令行
    显示磁盘使用率
    查看并输出文件末尾 1kb 的数据
    查看系统中的目录和文件
    创建文件
    上传文件
    下载文件
    删除文件
    移动文件夹
    在master启动Hadoop集群

    [zkpk@master ~]$ start-all.sh
    hdfs命令行
    Hadoop教程

    显示磁盘使用率
    以字节为单位,对所有的文件,这些文件匹配的路径;文件名报告使用完整HDFS协议前缀
    hadoop fs -du
    查看并输出文件末尾 1kb 的数据
    例如,查看HDFS系统中文件/input/a.txt末尾1kb的内容。
    hadoop fs -tail /input/a.txt
    查看系统中的目录和文件
    hadoop fs -ls
    递归列出目录及文件
    hadoop fs -ls -R
    创建文件
    注意,不能创建级联目录。
    hadoop fs -mkdir
    使用-p参数创建多级目录,如果父目录不存在,则自动创建父目录。
    hadoop fs -mkdir -p /input/file/
    上传文件
    hadoop fs -put

    hadoop fs -copyFromLocal
    下载文件
    hadoop fs -get
    命令copyToLocal后边必须跟两个参数,第一个是HDFS上的文件的绝对路径,第二个是本地要存档下载文件的路径,必须存在,否则报错。
    hadoop fs -copyToLocal
    删除文件
    文件路径必须存在,否则报错。
    hadoop fs -rm
    递归删除某个文件夹下所有的文件夹和目录
    hadoop fs -rmr
    移动文件夹
    使用mv命令可以移动HDFS文件到另一个文件,相当于给文件重命名并且保存,但原文件被删除。例如,将/input/a.txt移动到/input/b.txt,不保留a.txt文件。
    hadoop fs -mv /input/a.txt /input/b.txt
    使用cp命令可以复制HDFS中的文件到另一个文件,相当于原文件重命名并且保存,并且原文件仍然存在。例如,将/input/a.txt复制到b.txt,并保留a.txt文件。
    hadoop fs -cp /input/a.txt /input/b.txt

    文章转自:Linux常用命令(Hadoop)_大数据系统-答学网

    作者:答学网,转载请注明原文链接:http://www.dxzl8.com/

  • 相关阅读:
    大数据 Hive 数据仓库介绍
    天软特色因子看板 (2023.09 第05期)
    C++中的各种函数及用法(2)
    快速开发项目-VScode插件
    服务器基础知识:raid卡有什么优势?
    算法记录 & 牛客网 & leetcode刷题记录
    13李沐动手学深度学习v2/权重衰退从0开始实现
    【ChatGLM2-6B】nginx转发配置
    Windows安装Jenkins
    SQLMAP --TAMPER的编写
  • 原文地址:https://blog.csdn.net/zl5186888/article/details/126900117