Hadoop搭建常见问题总结

1. 启动Hadoop之后不出现Datanode节点

可能原因：多次格式化，导致namenode和DataNodeID不匹配造成

解决办法：删除hadoop目录下的data目录和logs目录

2. 启动Hadoop之后不出现namenode节点

可能原因：

启动Hadoop集群后没有关闭就直接关闭了虚拟机
频繁使用hadoop namenode -format对namenode进行格式化

解决办法：这是我们只需要使用删除命令rm -rf 删除tmp文件，再次对namenode格式化，然后启动集群就可以了

tmp文件指的是图中“指定Hadoop数据的存储目录”，就是把data文件删掉再格式化namenode就可以了；

3. 启动Hadoop之后无法访问hadoop102：9870

可能原因：hadoop中没有启动namenode节点

解决办法：启动namenode节点再重新启动服务就可以访问；启动namenode节点方法见第二点；

总结：一定不要多次格式化，格式化NameNode，会产生新的集群id，导致NameNode和DataNode的集群id不一致，集群找不到已往数据。如果集群在运行过程中报错，需要重新格式化NameNode的话，一定要先停止namenode和datanode进程，并且要删除所有机器的data和logs目录，然后再进行格式化。

Hadoop搭建常见问题总结相关推荐

hadoop搭建伪分布式集群（centos7+hadoop-3.1.1）
原文地址:https://www.cnblogs.com/zhengna/p/9316424.html Hadoop三种安装模式搭建伪分布式集群准备条件第一部分安装前部署 1.查看虚拟机版本 2 ...
hadoop搭建与eclipse开发环境设置
hadoop搭建与eclipse开发环境设置(转) 1. Windows下eclipse开发环境配置 1.1 安装开发hadoop插件将hadoop安装包hadoop\contrib\ecli ...
**Hadoop Ubuntu系统搭建攻略全详细！！！附带Hadoop搭建成功后测试案例**
Hadoop Ubuntu系统搭建攻略全详细!!!附带Hadoop搭建成功后测试案例 Hadoop搭建教程一.需要安装的工具: 1.首先确保虚拟机能连上网. 2.更新源列表: sudo apt-ge ...
csgo自建局域网服务器,CSGO（KZ模式）服务器搭建常见问题答疑
一.架设服务器时,SourceMod和Metamod还有GOKZ都放对位置了,也可以进入服务器,进去有一堆BOT对打答:检查是不是都按照我说的全部文件安装了,除了这3个还有MovementAPI和D ...
基于Hadoop搭建HA集群网盘系统
Hadoop云盘项目总结 0. 项目介绍介绍视频: 基于Hadoop搭建HA高可用网盘系统视频地址: B站搭建过程: 我的搭建过程小组成员的搭建过程项目地址待完善后会发出来技术栈:HDFS ...
hadoop搭建成功的标志
加粗样式针对hadoop搭建成功,小编看网上大多都是主机输入命令jps后,出现五个进程,不包括jps,其实判断的标准并非是这样的. 这与你的配置文件有关. 如有的人运行jps查看只有4个而没有Sec ...
高可用(HA)Hadoop搭建Hive on Spark
高可用(HA)Hadoop搭建Hive on Spark 本文只介绍hive on spark搭建,Hadoop高可用(HA)请自行操作, 安装HIVE 1. 解压hive tar -zxvf apa ...
基于hadoop搭建Spark环境
基于hadoop搭建Spark环境需要准备的东西 1. 准备一个配置好的hadoop,master虚拟机 2. 下载下面的三个文件 3. jdk-8u181-linux-x64.tar.gz 4. ...
Hadoop搭建完全分布式集群
Hadoop搭建完全分布式集群搭建准备配置ssh和编写一个分发shell脚本 java和hadoop 运行测试最近公司事情不是很多,趁此机会,学习一下大数据的内容,正好公司之后也要使用大数据方面 ...

Hadoop搭建常见问题总结

Hadoop搭建常见问题总结

1. 启动Hadoop之后不出现Datanode节点

2. 启动Hadoop之后不出现namenode节点

3. 启动Hadoop之后无法访问hadoop102：9870

Hadoop搭建常见问题总结相关推荐

最新文章

热门文章