FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

Myth丶恋晨 2023-01-20 02:57 27阅读 0赞

###### hiveserver2中运行命令报错 Execution Errorreturn code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask ######

###### 解决办法、 ######

**1、调大虚拟机内存，单台节点至少1G可用，调大虚拟机内存不需要关机，调小需要关机，如果上限只有XG，不能调大，关机再调，再调节MapReduce单个任务分配的内存分配的内存大小**

set mapreduce.map.memory.mb=2048;
    set mapreduce.reduce.memory.mb=2048;

**2、yarn-env。sh增加JAVA\_HOME(注意发送到另外两台服务器)**

export JAVA_HOME=$JAVA_HOME      #你的java路径

**3、增大yarn单个container的大小，默认为1**

set yarn.scheduler.maximum-allocation-mb=2048;
    set yarn.scheduler/minumum-allocation-mb=1024;

**4、yarn跑步起来，报错集群时间不同步（和当前系统时间差不多一致）**  
同步集群时间  
（我使用的是集群时间同步脚本）  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU3OTAxNQ_size_16_color_FFFFFF_t_70]  
**集群同步时间脚本date.sh**

#!/bin/bash
    #1. 指定机器上同步指定时间
    if (($# == 0 ))
    then
    echo 请输入要修改的时间!
    exit;
    fi
    #2. 修改系统时间
    for host in master slave1 slave2
    do
    echo ==================== 同步 $host 时间 ====================
    ssh -t $host "sudo date -s '$@'"
    done

运行脚本  
date.sh 2021-05-01

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU3OTAxNQ_size_16_color_FFFFFF_t_70]: /images/20221021/02c393617a1549e5b299d4efa6af78a4.png

FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

发表评论取消回复

还没有评论，来说两句吧...

相关阅读

相关已解决：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask

相关 Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.spark.SparkTask. Spark job faile

相关 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask

相关 FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

相关 HIVE Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Directory hdfs://m

相关 [Hadoop] Hive查询报错“Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”

相关 hive创建表失败：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaEx

相关 Hive 删除表报错： FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.

相关 Hive 调度任务报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

相关 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask