hadoop在章鱼大数据平台下的安装与配置
本次所用的软件版本:
ubuntu :14.04
Hadoop:hadoop-2.6.0-cdh5.4.5
jdk:jdk-7u75-linux-x64
Hive:
Hbase:
一、配置基本环境
1.下载软件压缩包
wget http://192.168.1.100:60000/hadoop-2.6.0-cdh5.4.5.tar.gz(文件的URL)
2.解压打开软件
sudo(临时获得root权限) tar -zxvf /tmp/jdk-7u75-linux-x64.tar.gz(文件下载所在目录) -C /opt/(指定目录) #解压到指定目录 sudo mv /opt/jdk1.7.0_75(解压指定路径) /opt/java(重命名文件名) #对文件目录重命名 sudo chown -R zhangyu.zhangyu /opt/java(文件路径) #修改文件目录的所有者
3.配置环境变量
sudo vim /etc/profile(环境变量的文件c) export JAVA_HOME(软件的环境变量名)=/opt/java (软件所在的路径) export PATH=$JAVA_HOME/bin:$PATH source /etc/profile (刷新环境变量) java -version(验证java版本)
4.修改hosts
sudo vim /etc/hosts() 0.0.0.0 master 0.0.0.0 slave1 0.0.0.0 slave2
转载于:https://www.cnblogs.com/cherishcherry/p/7905037.html
hadoop在章鱼大数据平台下的安装与配置相关推荐
- 大数据平台下的数据治理
文章目录 什么是数据治理 难题 大数据平台下的数据生命周期 数据治理关键场景 数据治理面临的挑战 数据治理关键问题 1. 海量系统规模 2. 复杂存储 3. 复杂采集 数据治理目标 数据治理平台与周边 ...
- SQL on Hadoop在快手大数据平台的实践与优化 | 分享实录
快手大数据架构工程师钟靓 本文是根据快手大数据架构工程师钟靓于 5月18-19日在A2M人工智能与机器学习创新峰会<SQL on Hadoop在快手大数据平台的实践与优化>演讲中的分享内容 ...
- 企业大数据平台下数仓建设思路
免费开通大数据服务:https://www.aliyun.com/product/odps 介然(李金波),阿里云高级技术专家,现任阿里云大数据数仓解决方案总架构师.8年以上互联网数据仓库经历,对系统 ...
- 数据中台建设方案-基于大数据平台(下)
数据中台建设方案 -基于大数据平台(下) 1数据中台建设方案 1.1 总体建设方案 1.2大数据集成平台 1.3大数据计算平台 1.3.1数据计算层建设
- 浅谈网易大数据平台下的数据质量
大数据平台的核心理念是构建于业务之上,用数据为业务创造价值.大数据平台的搭建之初,优先满足业务的使用需求,数据质量往往是被忽视的一环.但随着业务的逐渐稳定,数据质量越来越被人们所重视. 千里之堤,溃于 ...
- 国内跨云端平台应用的大数据平台供应商,基于Hadoop的互联网大数据平台解决方案,武汉数道云...
跨云端大数据平台是什么?有何实质性的价值呢?如何去实现跨云端大数据平台技术呢?这是耐人深思的话题. 高速发展的信息技术,不断扩张的数据库容量,互联网作为信息传播和再生的平台,"信息泛滥&qu ...
- 机器学习从入门到精通50讲(一)-大数据平台下的数据质量管理
大数据平台的核心理念是构建于业务之上,用数据为业务创造价值.大数据平台的搭建之初,优先满足业务的使用需求,数据质量往往是被忽视的一环.但随着业务的逐渐稳定,数据质量越来越被人们所重视. 千里之堤,溃于 ...
- (非常详细)大数据平台学习·环境安装配置(一)(RockyLinux9版)
一.文章简介 着手搭建大数据平台时,配置虚拟机环境是成为新手的第一道门槛.虽然各种视频和网站上也有很多虚拟机安装配置教程,但由于对 Linux 环境不熟悉,同时加上网上不少教程都是五花八门的cento ...
- 大数据平台搭建,cdh选型配置
天天干后端,又干前端,本行大数据,差点生疏了,哦吼~正当我发愁之际. 领导安排任务了,下个月去某控上市公司.他们需要从0 开始做大数据平台,主要工作内容如下, 平台搭建,数据迁移,数据分析与挖掘.然后 ...
最新文章
- LeetCode_97.交错字符串_没懂
- Python执行 SQL 命令并实时打印输出
- Redmine数据库备份及搬家
- Keras实现LeNet-5网络,与可视化网络
- CentOS 架设DHCP服务
- 寻找linux最新版本,在各大Linux发行版中安装和使用inxi以查找Linux系统详细信息...
- 如何设置二进制某一位的值_mysql参数设置--max_allowed_packet 值如何调整?
- mysql和sqlyog安装_MySQL与sqlyog安装教程图文详解
- 信息机房服务器搬迁,信息中心机房搬迁实施方案-20210725001522.pdf-原创力文档
- TFLite Interpreter
- C++ Tetris俄罗斯方块
- 在Oracle中,什么是物理读和逻辑读?
- Django学习笔记(3):使用模型类进行查询(查询函数、F对象、Q对象、聚合函数、查询集、模型类关系、关联查询、自关联、管理器)
- Java导出Excel表格出现文件损坏异常解决方案
- 语音信号处理疑惑与解答
- 2021-11-10----韩顺平Java入门第七天
- 甲基乙烯基硼酸 cas7547-97-9/异环己酰亚胺 cas4538-37-8
- 计算机专业大学生该买什么配置的电脑,大学生适合买什么配置的电脑?
- 51单片机可以用来做什么?单片机可以做的小产品
- Linux三级考试题型,CFA考试题型:一二三级题型分别是什么?