Windows环境下hadoop安装和配置详细步骤
一、下载Hadoop
http://www.apache.org/dyn/closer.cgi/hadoop/common
(我下载的版本是hadoop-2.6.0-cdh5.14.2.tar.gz,这里就以此版本为例)
下载 hadoop 安装包至安装目录
安装目录:/opt/download/hadoop
2、解压安装包至软件目录(最好更名,以便之后方便配置文件)
3、进入文件,准备配置
因为需要用到 java 的路径,可以代码查找,并复制至剪贴板备用
二、配置Hadoop的环境变量
修改配置文件
注:注意修改路径和IP地址之类的变更项
1.配置 jdk 路径
#更换 JAVA_HOME 的路径
2.修改核心配置文件
设置默认文件系统(本地默认 file:/位置)此处端口与HBASE端口设成一样
创建临时存储文件路径
授权访问用户为所有 root 型
授权访问用户为任意组的 root 型
3.设置文件副本个数
这里:最少3个伪分布只写1个,我只用一台机子模拟
4.设置映射化简模型框架
这里需要复制 mapred-site.xml.template 临时文件,并在复制后的文件中配置(注意命名)
设置框架为 yarn
5.设置 yarn 站点+节点
设置 yarn 站点名称为:localhost
设置辅助节点管理
6.添加环境变量的相关项
三、启动调试是否配置成功
1.加载环境变量配置文件
2.格式化 NameNode
3.启动 Hadoop
4.检验启动是否成功
后台进程应该有相关的5项
5.网页键入 http://192.168.95.138:50070 页面显示为:
检验成功,即安装成功!
Windows环境下hadoop安装和配置详细步骤相关推荐
- OpenVINO之二:Windows环境下OpenVINO安装与配置
OpenVINO系列: OpenVINO之一:OpenVINO概述 OpenVINO之二:Windows环境下OpenVINO安装与配置 OpenVINO之三:Linux环境下OpenVINO安装与配 ...
- windows ce 安装java,Windows环境下JDK安装和配置
相信所有学习Java的朋友应该都在Windows操作系统中安装和配置过JDK,这里我们将详细介绍安装和配置过程! 在Linux环境下安装JDK可参考:Linux环境下JDK安装和配置 下面我们开始讲解 ...
- windows环境下IDEA安装和配置和第一个IDEA项目运行加常用快捷键
IDEA安装和配置和第一个IDEA项目运行加常用快捷键 IDEA开发工具是和eclipse.myeclipse差不多的java开发工具. IDEA是一个专门针对Java的集成开发工具(IDE),由Ja ...
- Windows环境下QWT安装及配置
** 1.QWT下载路径 **:https://sourceforge.net/projects/qwt/ 主要下载这三个文件:qwt-6.1.2.zip.qwt-6.1.2.pdf,qwt-6.1. ...
- mysql5.715 安装在d盘_mysql5.7.15在windows环境下的安装设置图文详细教程
软件安装:装机软件必备包 SQL是Structured Query Language(结构化查询语言)的缩写.SQL是专为数据库而建立的操作命令集,是一种功能齐全的数据库语言.在使用它时,只需要发出& ...
- 4.windows环境下如何安装memcached教程(转载+自己整理)
Memcached 是一个开源免费高性能的分布式内存对象缓存系统,能够加快网站访问速度和减轻数据库压力,本文向大家介绍下windows环境下如何安装memcached.百度经验:jingyan. ...
- Weblogic 10.3.5在64位Windows系统下的安装和配置
2011-08-23 Weblogic 10.3.5在64位Windows系统下的安装和配置 作者: BeanSoft 日期: 2011-8-23 今天, 笔者将向大家介绍Oracle Weblogi ...
- Windows环境下PyTorch_geometric安装踩坑
Windows环境下PyTorch_geometric安装踩坑 pytorch geometric在windows环境下安装非常恶心,莫名其妙各种报错.本帖针对GCC的编译error提供解决方案. 一 ...
- Redis学习笔记~Redis在windows环境下的安装
Redis是一个key-value的存储系统,它最大的特点就是可以将数据序列化到文件中. redis存储在服务器的内存或者文件中,它不是session,不是cookies,它只是个更安全,更稳定,更可 ...
- windows环境下如何安装memcached教程
Memcached 是一个开源免费高性能的分布式内存对象缓存系统,能够加快网站访问速度和减轻数据库压力,本文向大家介绍下windows环境下如何安装memcached. 工具/原料 memcached ...
最新文章
- POJO、JavaBean、DAO
- 一步一步教你如何用python做词云_一步一步教你如何用Python做词云
- 记一次院赛CTF的WEB题(入门级别)
- 我犯的错误--关于主键
- hapi和typescript构建项目(正在更新中)
- html如何查看文档,查看文档
- Oracle中shrink space命令
- car-like robot运动机构简析
- ansible软件模块参数
- C语言默认参数值的实现
- python selenium点击网页关闭按钮_基于python的selenium-打开关闭第二个页面
- 算法:链表实现插入排序Insertion Sort List
- c# asp.net在线问卷调查系统源码【源码分享】
- 神经网络分析教学目标,神经网络分析教学反思
- ES集群安装错误记录
- 基于matlab的手写体数字识别系统
- 论文解读《Co-Correcting:Noise-tolerant Medical Image Classification via mutual Label Correction》
- 微信公众账号第三方平台全网发布源码(java)- 实战测试通过
- Vue+Element-UI 上传图片,打开相机,相册
- Logminer使用(追加日志模式)