Tez学习笔记 --- Tez与MapReduce原理与分析

xiaoxiao2021-02-28  113

首先看一下MapReduce的工作流程图

Tez工作流程图

从上面两个图可以看出,Tez可以将多个有依赖的作业转换为一个作业(这样只需写一次HDFS,且中间节点较少),从而大大提升DAG作业的性能。Tez已被Hortonworks用于Hive引擎的优化,经测试,性能提升约100倍。

转载请注明原文地址: https://www.6miu.com/read-45435.html

最新回复(0)