Hadoop读书笔记（1）

hadoop fs -ls
hadoop fs -lsr
hadoop fs -mkdir input //在HDFS上创建输入文件夹

hadoop fs -put a.txt input //上传本地file中文件到集群的input目录下

hadoop fs -ls input
//在集群上运行WordCount程序
hadoop jar /hadoop-2.2.0/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount input output

//MapReduce执行过程显示信息
hadoop fs -ls output

//查看HDFS上output目录内容

hadoop fs -cat output/part-r-00000

hadoop fs -get /user/hadoop/a.txt /
hadoop fs -cp src dst
hadoop fs -distcp src dst
hadoop fs -mv src dst
hadoop fs -cat /user/hadoop/a.txt
hadoop fs -rm /user/hadoop/a.txt
hadoop fs -rmr /user/hadoop/a.txt
hadoop fs -text /user/hadoop/a.txt
hadoop fs -copyFromLocal localsrc dst 与hadoop fs -put功能类似。
hadoop fs -moveFromLocal localsrc dst 将本地文件上传到hdfs，同时删除本地文件。

hadoop fsck和hadoop fs -dus显示的文件大小表示的是文件占用的逻辑空间。

Hadoop读书笔记（1）相关推荐

Hadoop读书笔记（四）HDFS体系结构
Hadoop读书笔记(一)Hadoop介绍:http://blog.csdn.net/caicongyang/article/details/39898629 Hadoop读书笔记(二)HDFS的sh ...
Hadoop读书笔记（六）MapReduce自定义数据类型demo
Hadoop读书笔记(一)Hadoop介绍:http://blog.csdn.net/caicongyang/article/details/39898629 Hadoop读书笔记(二)HDFS的sh ...
Hadoop读书笔记（八）MapReduce 打成jar包demo
Hadoop读书笔记(一)Hadoop介绍:http://blog.csdn.net/caicongyang/article/details/39898629 Hadoop读书笔记(二)HDFS的sh ...
Hadoop读书笔记（三）Java API操作HDFS
Hadoop读书笔记(一)Hadoop介绍:http://blog.csdn.net/caicongyang/article/details/39898629 Hadoop读书笔记(二)HDFS的sh ...
Hadoop读书笔记——基础知识
//书非借不能读也,今早从图书馆新书阅览室借来<Hadoop in Action>,最长借期7天.整理读书笔记并留下电子版以供以后方便复习. Hadoop是一个开源的框架,可编写和运行分布 ...
[hadoop读书笔记] 第十五章 sqoop1.4.6小实验 - 将mysq数据导入hive
安装hive 1.下载hive-2.1.1(搭配hadoop版本为2.7.3) 2.解压到文件夹下 /wdcloud/app/hive-2.1.1 3.配置环境变量 4.在mysql上创建元数据库hi ...
Hadoop读书笔记（一）Hadoop介绍
1.Hadoop是什么? 适合大数据的分布式与计算平台. HDFS:Hadoop Distributed File System 分布式文件系统 MapReduce:并行计算框架 2.HDFS的架构 ...
《Hadoop权威指南》读书笔记1
<Hadoop权威指南>读书笔记 Day1 第一章 1.MapReduce适合一次写入.多次读取数据的应用,关系型数据库则更适合持续更新的数据集. 2.MapReduce是一种线性的可伸缩 ...
《Hadoop 权威指南》读书笔记之七 — chapter7
<Hadoop 权威指南>读书笔记之七 - chapter7[updating-] The whole process of MapReduce at the highes level,t ...

Hadoop读书笔记（1）

Hadoop读书笔记（1）相关推荐

最新文章

热门文章