Advertisement

Tez的简介及安装配置

阅读量:

Tez框架概述

Tez作为Hive的执行引擎,因其无需进行中间存储的操作流程,相较于MR展现出更优的运行效率。该引擎能够将多个相互依赖的任务整合为单一任务,从而仅需对HDFS进行一次写入操作,减少了中间处理节点的数量,进而有效提升了整体计算效率。

Tez安装流程概述

1)将安装包传输至hive所在的66服务器后进行下载,并完成解压缩操作。

复制代码
 wget https://mirrors.bfsu.edu.cn/apache/tez/0.10.0/apache-tez-0.10.0-bin.tar.gz

    
 tar -xzvf apache-tez-0.10.0-bin.tar.gz
    
    
    
    

2)在HIVE系统中设置TEZ组件

2.1)对hive-env.sh配置文件进行编辑,增加相应参数配置内容,随后将TEZ相关的jar包文件复制至Hive的lib目录中

复制代码
 [user@NewBieMaster conf]$ cat hive-env.sh

    
  
    
 。。。。。。
    
 e

全部评论 (0)

还没有任何评论哟~