51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 2393|回复: 0
打印 上一主题 下一主题

[原创] hadoop命令

[复制链接]
  • TA的每日心情
    无聊
    4 小时前
  • 签到天数: 493 天

    连续签到: 3 天

    [LV.9]测试副司令

    跳转到指定楼层
    1#
    发表于 2019-1-10 14:18:05 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1. 查看文件 hadoop dfs -ls

    2. 创建目录
    hadoop dfs -mkdir /ttt


    3. 上传文件
    hadoop dfs -put local_file hadoop_file


    4. 下载文件
    hadoop dfs -get hadoop_file local_file


    5. 查看文件内容
    hadoop dfs -cat hadoop_file


    6. 删除文件
    hadoop dfs -rmr hadoop_file


    7、通过distcp进行并行复制

    • 相同hadoop版本的集群复制: hadoop distcp hdfs://NameNode1/path1 hdfs://NameNode2/path2
    • 不同hadoop版本的集群复制: hadoop distcp hftp://NameNode1:50070/path1 hdfs://NameNode2/path2


    8、使用Hadoop归档文件
    hadoop archive –archiveName files.har -p /user/hadoop/in /user/hadoop


    9、查看归档文件
    hadoop dfs -ls /user/hadoop/files.har




    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-9-20 13:54 , Processed in 0.077112 second(s), 23 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表