Presto编译安装和测试连接Hive

2024-06-30 08:34:57

1.下载

源码：

 git clone https://github.com/prestodb/presto.gitmvn clean install -DskipTests

在Windows环境下编译报错未解决

在Linux环境下编译成功

2.安装

这里安装使用的不是自己编译的，而是安装官网文档操作，并下载的安装包。

注意：需要jdk版本 java 8 u92+，否则会报错

2.1 下载安装包

下载地址：https://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.184/presto-server-0.184.tar.gz

CLI下载地址：https://repo1.maven.org/maven2/com/facebook/presto/presto-cli/0.184/presto-cli-0.184-executable.jar

2.2 解压

服务端

tar xvf presto-server-0.184.tar.gz

CLI

mv presto-cli-0.184-executable.jar presto
chmod +x presto

2.3 配置文件

在presto-server根目录，新建etc文件夹

mkdir etc

新建节点配置etc/node.properties，添加如下内容

node.environment=production
node.id=ffffffff-ffff-ffff-ffff-ffffffffffff
node.data-dir=/var/presto/data

新建jvm配置 etc/jvm.config，添加如下内容

-server
-Xmx16G
-XX:+UseConcMarkSweepGC
-XX:+ExplicitGCInvokesConcurrent
-XX:+CMSClassUnloadingEnabled
-XX:+AggressiveOpts
-XX:+HeapDumpOnOutOfMemoryError
-XX:OnOutOfMemoryError=kill -9 %p
-XX:ReservedCodeCacheSize=150M

新建配置文件 etc/config.properties，内容如下

coordinator=true
node-scheduler.include-coordinator=true
http-server.http.port=8080
task.max-memory=1GB
discovery-server.enabled=true
discovery.uri=http://jiumei:8080

新建文件 etc/log.properties，内容如下

 com.facebook.presto=INFO

3. 启动和停止

启动

bin/launcher start

停止

bin/launcher stop

4.测试连接hive

新建hive配置文件 etc/catalog/hive.properties，内容如下

connector.name=hive-hadoop2
hive.metastore.uri=thrift://master:9083

测试

./presto --server localhost:8080 --catalog hive --schema default

5.在Metabase中配置presto

Metabase支持的数据库中没有hive，但是在很多大数据分析场景下，数据存储是在hive中的。发现Metabase是支持Presto的，而Presto是支持Hive的，所以这里通过Presto连接Hive，再用Metabase访问Presto，就可以操作Hive的数据了。

配置连接信息，查看hive中的表。

Presto编译安装和测试连接Hive相关推荐

freerdp 解压安装_Ubuntu下编译安装运作FreeRdp连接Windows
Ubuntu下编译安装运行FreeRdp连接Windows. linux下编译源码进行USB重定向到远程桌面的测试,经过参数的正确配置,可以正常的重定向.具体的操作步骤如下: ⑴在虚拟机上安装git, ...
my SQL下载安装，环境配置，以及密码忘记的解决，以及navicat for mysql下载，安装，测试连接...
一.下载在百度上搜索"mysql-5.6.24-winx64下载" 二.安装选择安装路径,我的路径"C:\Soft\mysql-5.6.24-winx64" ...
04_MySQL笔记-介绍-rpm安装/源码编译安装MySQL-远程连接
文章目录介绍 rpm方式安装MySQL 源码编译安装MySQL 一键安装脚本远程连接个人博客 https://blog.csdn.net/cPen_web 介绍 MySQL MySQL是一个数据 ...
MongoDB下载安装与测试连接(windows)
一.MongoDB下载 MongoDB为Windows提供了两种安装方式,分别是msi和zip方式. msi方式对4.0以上版本进行了优化,而3.x版本则需在安装后手动进行配置:zip方式解压即安装, ...
GRPC编译安装及测试
一.安装grpc 安装grpc指令,官网链接:https://github.com/grpc/grpc/blob/master/BUILDING.md 下载源码 git clone -b RELEAS ...
LINUX - 实时LINUX内核（PREEMPT_RT）的编译安装以及测试
目录 1.什么是实时性操作系统? 2.怎么实现实时性系统? 3.PREEMPT_RT 4.使用方法 4.1下载linux内核源码 4.2下载RT patch 4.3 使用方法 5.测试 6.总结 7. ...
Jumpserver安装和测试连接
JumpServer安装和部署一.引言在特定网络环境中(如内网和外网),为了保证公司网络中的服务器数据不受外界的入侵和破坏,运用各种技术手段收集和监控公司服务器的状态,安全时间.以便集中报警,并且 ...
python怎么测试opencv安装是否成功_学习笔记：自己编译安装OpenCV+测试opencv安装是否成功...
跟着猿人学python,我的学习笔记.本次的配置在ubuntu中成功安装了opencv,并通过以下方法测试成功了.现将具体的安装及测试过程整理出来分享给大家. 1. 安装编译依赖的软件包 # 安装读写 ...
mysql aced是什么_memcached编译安装及缓存mysql测试
说明: 客户端第一次访问应用程序时,会到数据库(RDBMS类型)中取出数据,返回给客户端:同时也将取出的数据保存到memcached中. 第二次访问时,因为数据已经缓存,不用去数据库查询,直接从mem ...

最新文章

热门文章