安装Tez Ui

article/2025/11/1 2:35:14

tomcat下载
wget https://archive.apache.org/dist/tomcat/tomcat-8/v8.5.73/bin/apache-tomcat-8.5.73.tar.gz
tez下载
wget https://repository.apache.org/content/repositories/releases/org/apache/tez/tez-ui/0.9.1/tez-ui-0.9.1.war

解压:
tar -zxvf apache-tomcat-8.5.73.tar.gz

如果更改web端口(默认8080)
在/opt/apache-tomcat-8.5.73/conf/server.xml

<Connector port="8822" protocol="HTTP/1.1"connectionTimeout="20000"redirectPort="8443" />

tez下载、解压:

mkdir /opt/apache-tomcat-8.5.73/webapps/tez-ui
cd /opt/apache-tomcat-8.5.73/webapps/tez-ui
wget https://repository.apache.org/content/repositories/releases/org/apache/tez/tez-ui/0.9.1/tez-ui-0.9.1.war
unzip tez-ui-0.9.2.war

根据实际情况,修改config/configs.env

 timelineBaseUrl: 'http://localhost:8188',
RMWebUrl: 'http://localhost:8088',

–注意要去点前面的’//'注释
配置yarn-site.xml
—我这个版本默认配置有,没有修改

yarn-site.xml
-------------
...
<property><description>Indicate to clients whether Timeline service is enabled or not.If enabled, the TimelineClient library used by end-users will post entitiesand events to the Timeline server.</description><name>yarn.timeline-service.enabled</name><value>true</value>
</property><property><description>The hostname of the Timeline service web application.</description><name>yarn.timeline-service.hostname</name><value>localhost</value>
</property><property><description>Enables cross-origin support (CORS) for web services wherecross-origin web response headers are needed. For example, javascript makinga web services request to the timeline server.</description><name>yarn.timeline-service.http-cross-origin.enabled</name><value>true</value>
</property><property><description>Publish YARN information to Timeline Server</description><name> yarn.resourcemanager.system-metrics-publisher.enabled</name><value>true</value>
</property>
...

修改tez-site.xml
tez.history.logging.service.class
原:org.apache.tez.dag.history.logging.proto.ProtoHistoryLoggingService
改:org.apache.tez.dag.history.logging.ats.ATSHistoryLoggingService

tez.am.tez-ui.history-url.template(不改也能用,用默认的配置也行)

原:__HISTORY_URL_BASE__?viewPath=%2F%23%2Ftez-app%2F__APPLICATION_ID__
改:http://bdtest-main05:8822/tez-ui/

改完之后,重启tomcat,和相关hive服务,会显示All DAG

若想显示Hive Queries,需要修改下面内容:

hive.exec.failure.hooks
原:org.apache.hadoop.hive.ql.hooks.HiveProtoLoggingHook
改:org.apache.hadoop.hive.ql.hooks.ATSHookhive.exec.post.hooks
原:org.apache.hadoop.hive.ql.hooks.HiveProtoLoggingHook
改:org.apache.hadoop.hive.ql.hooks.ATSHookhive.exec.pre.hooks
原:org.apache.hadoop.hive.ql.hooks.HiveProtoLoggingHook
改:org.apache.hadoop.hive.ql.hooks.ATSHook

在这里插入图片描述

重启tomcat,和相关hive服务
cd /opt/apache-tomcat-8.5.73/bin
./shutdown.sh
./startup.sh

最终显示如下:
在这里插入图片描述
在这里插入图片描述


http://chatgpt.dhexx.cn/article/MhZ3dBeI.shtml

相关文章

Hive3.1.2 on Tez0.10.1的安装部署

一、Hive环境搭建 Hive安装部署 1&#xff09;把apache-hive-3.1.2-bin.tar.gz上传到linux的/opt/software目录下 2&#xff09;解压apache-hive-3.1.2-bin.tar.gz到/opt/module/目录下面 [yilihadoop102 software]$ tar -zxvf /opt/software/apache-hive-3.1.2-bin.tar.gz -…

HIVE-TEZ引擎配置安装

HIVE-TEZ引擎配置安装 基础环境准备参考安装流程1. TEZ环境准备1. 编译工具2. HADOOP3. PROTOBUF安装流程 4. LZO安装流程 5. TEZ安装流程 2. TEZ配置1. HADOOPtez-site.xmltez.sh 2. HIVEhive-site.xmlhive-env.sh日志JAR包冲突 END! 基础环境准备 由于该文章主要关注TEZ引擎…

Tez安装与使用(与hive配合使用)及lzo.jar报错错误解决

1 tez介绍 tez是一个apache的开源项目&#xff0c;意在构建一个应用框架&#xff0c;能通过复杂任务的DAG来处理数据。它是基于当前的hadoop yarn之上&#xff0c;换句话就是yarn为其提供资源。 tez主要的两个设计目标: 增强终端用户使用: 灵活的数据流定义API 灵活的输入…

Tez安装配置

介绍&#xff1a;hive默认计算引擎为MR&#xff0c;而MR的特性决定了它的运算速度并不是太让人满意。在此将其运算引擎修改为Tez&#xff08;当然在此需要先安装Tez&#xff09;&#xff0c;Tez基于内存的计算使得hive可以有更高的运算效率 对于 Tez 0.8.3 及更高版本&#xf…

计算引擎Tez安装

1.解压压缩包 tar -zxvf apache-tez-0.9.2-bin.tar.gz2.将tez路径下的压缩包放到hdfs上 /opt/lagou/servers/tez/share/tez.tar.gzhdfs dfs -mkdir /user/tez hdfs dfs -put tez.tar.gz /user/tez/3.配置hadoop让其他地方知道该路径 该路径下新建配置文件tez-site.xml /opt/…

tez得文件生成个数与什么有关?

之前研究过hive on spark&#xff0c;最后的文件生成个数hive-mapJoin和skewJoin-CSDN博客 现在在cdp了 使用的是hive on tez。也在学习下这个文件的生成个数与什么有关&#xff1f; 以该表为例 有11个文件 每个差不多60M左右 总共620M左右。 我们先想下 哪些参数和生成的文件…

hive-tez

1 参考&#xff1a; https://www.freesion.com/article/9435149734/ https://blog.csdn.net/Shea1992/article/details/101041244 https://www.jianshu.com/p/9fb9f32e1f0f https://www.jianshu.com/p/45c95a51a8c2 https://blog.csdn.net/weixin_43941899/article/details/105…

CDH6.3.2搭建HIVE ON TEZ步骤

|引言 参考&#xff1a;CDH6.3.2 hive on tez搭建过程_我不是橙子的博客-CSDN博客 CDH6.3.2版本搭建Tez执行引擎过程 - 虎啸千峰 - 博客园 hive on tez集成完整采坑指南(含tez-ui及安全环境)_匆匆z2的博客-CSDN博客_hive on tez 下载过程中若是感觉慢的话可以参考这个操作步…

tez-ui docker镜像打包配置并部署K8S

一、下载tez ui安装包并修改配置文件 1.1 选择版本下载&#xff0c; tez-ui下载官方地址 mkdir tez-ui && cd tez-ui wget https://repository.apache.org/content/repositories/releases/org/apache/tez/tez-ui/0.9.1/tez-ui-0.9.1.war1.2 解压war包&#xff0c;修改…

Apache Tez 了解

转发自这位大佬博客&#xff1a;https://www.cnblogs.com/rongfengliang/p/6991020.html 你可能听说过Apache Tez&#xff0c;它是一个针对Hadoop数据处理应用程序的新分布式执行框架。但是它到底是什么呢&#xff1f;它的工作原理是什么&#xff1f;哪些人应该使用它&#xf…

Tez - 安装

一、Tez 安装 1 下载地址 https://mirrors.tuna.tsinghua.edu.cn/apache/tez/0.9.0/ 2 二进制包安装 2.1 解压并重命名 [roothadoop01 ~]# tar -zxvf /home/apache-tez-0.9.0-bin.tar.gz -C /usr/local/ [roothadoop01 ~]# mv /usr/local/apache-tez-0.9.0-bin/ /usr/local/t…

tez详解

1 tez的概览 1.1 tez介绍 1.1.1 介绍 tez是一个apache的开源项目&#xff0c;意在构建一个应用框架&#xff0c;能通过复杂任务的DAG来处理数据。它是基于当前的hadoop yarn之上&#xff0c;换句话就是yarn为其提供资源。 tez主要的两个设计目标: 增强终端用户使用: 灵活…

TEZ深入理解

简介 Tez是Apache开源的支持DAG作业的计算框架&#xff0c;是支持HADOOP2.x的重要引擎。它源于MapReduce框架&#xff0c;核心思想是将Map和Reduce两个操作进一步拆分&#xff0c;分解后的元操作可以任意灵活组合&#xff0c;产生新的操作&#xff0c;这些操作经过一些控制程序…

Tez 简介

目录 一、Tez简介 二、Tez UI界面 三、Tez 日志 一、Tez简介 1.1 Tez 是支持 DAG 作业的开源计算框架&#xff0c;它可以将多个有依赖的作业转换为一个作业从而大幅提升 DAG 作业的性能。 从本质上讲&#xff0c;Tez 组成非常简单&#xff1a; 数据处理管道引擎&#xff…

TEZ介绍及使用

TEZ介绍及使用 TEZ是什么&#xff1f; Tez是支持DAG作业的开源计算框架&#xff0c;它可以将多个有依赖的作业转换为一个作业从而大幅提升DAG 作业的性能。 Tez源于MapReduce框架&#xff0c;核心思想是将Map和Reduce两个操作进一步拆分&#xff0c;即Map被拆分成Input、Proc…

BACnet安全连接(BACnet/SC) 介绍

BACnet安全连接(BACnet/SC)是ASHRAE BACnet委员会最近发布的BACnet协议的增编。是在增编135-2016bj中介绍的。它基于一个安全的、加密的数据链路层。 专门设计以满足不同IP基础结构。对BACnet通信使用标准化的、通常已经存在的IP网络基础设施的需求正在增加&#xff0c;BACnet/…

BACnet学习笔记

BACnet是一种用于自动化建筑和控制网络的数据通信协议。(Building Automation and Control Networks) 自控网络通信协议基本体系: CAN -- 只定义了通信标准 BACnet BAC Model and Message Network Layer LANs The protocol can be viewed as a matrix of layers. Propertie…

BACnet协议简要说明及组网简介

主题概要BACnet协议BACnet协议简要说明&#xff0c;组网简介编辑时间新建20160217序号参考资料1BACnet协议正文1995版2http://www.bacnet.org/Tutorial/BACnetIP/ 1 协议说明 BACnet协议(A Data Communication Protocol for Building Automation and Control Networks)&#…

BACnet协议详解——应用层说明一

文章目录 写在前面1. 应用层模型1.1 需确认的应用层服务1.2 无需确认的应用层服务2 BACnet报文的分段2.1 报文分段规则2.1.1 APDU数据流的分段规则2.1.2 APDU最大长度的确定2.1.3 可接受的最大分段数2.2 分段协议控制信息(PCI)写在前面 年关将至,事情有点多,耽误了原本定好…

BACnet协议读取与发送

BACnet协议读取与发送 注意我的提问&#xff1a;更新开发环境BACnet相关基础知识BACnet格式BACnet代码BACnet设备查找BACnet设备读取BACnet写入操作AND其他...**BACpypes库中没有提供非标准数据类型接口&#xff01;&#xff01;&#xff01;&#xff01;&#xff01;** 结束 因…