公司hadoop客户端试用

今天用了一下公司的hadoop客户端，从外面下载的客户端不能用，只能用这个wiki里面提供的：link

装在了 tc-cm-201511novam12x12n0.tc 目录 /home/work/vip/hadoop-client/hadoop/bin

命令

$./hadoop fs -D fs.default.name=afs://pegasus.afs.baidu.com:9902 -D hadoop.job.ugi=nuomi-c-vip,密码 -put abc afs://pegasus.afs.baidu.com:9902/app/nuomi/c-vip16/11/28 14:50:22 INFO fs.LibdfsLoader: Trying to load the libdfs library...
16/11/28 14:50:22 INFO fs.LibdfsLoader: Loaded the libdfs library
16/11/28 14:50:22 INFO fs.DFileSystem: Loaded the libdfs library$ ./hadoop fs -D fs.default.name=afs://pegasus.afs.baidu.com:9902 -D hadoop.job.ugi=nuomi-c-vip,密码 -ls afs://pegasus.afs.baidu.com:9902/app/nuomi/c-vip16/11/28 14:50:29 INFO fs.LibdfsLoader: Trying to load the libdfs library...
16/11/28 14:50:29 INFO fs.LibdfsLoader: Loaded the libdfs library
16/11/28 14:50:29 INFO fs.DFileSystem: Loaded the libdfs library
Found 1 items
-rwxrwxrwx   3 nuomi-c-vip nuomi-c-vip          4 2016-11-28 14:50 /app/nuomi/c-vip/abc

然后再把这个文件删掉吧：

$ ./hadoop fs -D fs.default.name=afs://pegasus.afs.baidu.com:9902 -D hadoop.job.ugi=nuomi-c-vip,密码 -rm afs://pegasus.afs.baidu.com:9902/app/nuomi/c-vip/abc16/11/28 14:54:36 INFO fs.LibdfsLoader: Trying to load the libdfs library...
16/11/28 14:54:36 INFO fs.LibdfsLoader: Loaded the libdfs library
16/11/28 14:54:36 INFO fs.DFileSystem: Loaded the libdfs library
Deleted afs://pegasus.afs.baidu.com:9902/app/nuomi/c-vip/abc

支持的命令包括：

Usage: java FsShell[-ls <path>][-lsr <path>][-du <path>][-dus <path>][-count[-q] <path>][-mv <src> <dst>][-cp <src> <dst>][-ln <src> <dst>][-rm <path>][-rmr <path>][-expunge][-put <localsrc> ... <dst>][-copyFromLocal <localsrc> ... <dst>][-moveFromLocal <localsrc> ... <dst>][-get [-ignoreCrc] [-crc] [-repair] <src> <localdst>][-getmerge [-addnl] <src> <localdst> | -getmerge <src> <localdst> [addnl]][-cat <src>][-text <src>][-copyToLocal [-ignoreCrc] [-crc] [-repair] <src> <localdst>][-copySeqFileToLocal [-ignoreLen] <srcFile> <localDstFile>][-moveToLocal [-crc] <src> <localdst>][-mkdir <path>][-setrep [-R] [-w] [-d] <rep> <path/file>][-setAcl <user> <path> <permission>][-getAcl [-u <user>] [-p <path>] ][-removeAcl [-u <user>] [-p <path>] ][-touchz <path>][-test -[ezd] <path>][-stat [format] <path>][-tail [-f] <file>][-chmod [-R] <MODE[,MODE]... | OCTALMODE> PATH...][-chown [-R] [OWNER][:[GROUP]] PATH...][-chgrp [-R] GROUP PATH...][-help [cmd]]

转载于:https://www.cnblogs.com/charlesblc/p/6109540.html

公司hadoop客户端试用相关推荐

hadoop java访问_Hadoop（五）搭建Hadoop客户端与Java访问HDFS集群
上一篇详细介绍了HDFS集群,还有操作HDFS集群的一些命令,常用的命令: hdfs dfs -ls xxx hdfs dfs -mkdir -p /xxx/xxx hdfs dfs -cat xxx ...
Hadoop客户端环境准备（附IDEA免费激活码及补丁破解教程）
版权声明:本文为博主原创文章,未经博主允许不得转载. https://blog.csdn.net/wx1528159409 HDFS的API操作就是将之前在linux中用shell命令对文件上传.下载 ...
第二天-搭建Hadoop客户端
记录我的hadoop学习路线,也希望能帮助到正在学习hadoop可爱的亲们! (杰普企业老师指点) 其实hadoop的客户端很好搭建,比伪分布还要简单,只需要配置core-site.xml即可就是让 ...
android防拆机方案,拆机狂人必备 iFixit Android客户端试用
作者:Aimo 相信不少IT产品爱好者都知道iFixit,即使不知道的人在不经意见也会看到过iFixit的作品--iFixit是一家著名的IT产品维修网站,新IT产品流出之时的第一手拆机资料往往都来 ...
hadoop客户端提交作业代码解读
客户端提交作业: YarnRunner.submitApplication() YarnClientImpl.submitApplication ApplicationClientP ...
2021年大数据Hadoop（四）：Hadoop发行版公司
2021大数据领域优质创作博客,带你从入门到精通,该博客每天更新,逐渐完善大数据各个知识体系的文章,帮助大家更高效学习. 有对大数据感兴趣的可以关注微信公众号:三帮大数据目录 Hadoop发行版公司 ...
关于Hadoop多用户管理支持客户端远程操作的理论总结
1.问题 Hadoop客户端如何配置可远程操作Hadoop:Hadoop多用户情况下,是如何管理权限并分配存储空间和计算能力,保证集群的稳定. 2.Hadoop平台要理解客户端如何通过指定用户远程操 ...
基于Hadoop的大数据平台实施记——整体架构设计[转]
http://blog.csdn.net/jacktan/article/details/9200979 大数据的热度在持续的升温,继云计算之后大数据成为又一大众所追捧的新星.我们暂不去讨论大数据到底 ...
Hadoop参数汇总
Hadoop参数汇总 @(hadoop)[配置] linux参数以下参数最好优化一下: 文件描述符ulimit -n 用户最大进程 nproc (hbase需要 hbse book) 关闭swap分 ...

公司hadoop客户端试用

公司hadoop客户端试用相关推荐

最新文章

热门文章