Advertisement

Spark> Yarn集群出现错误

阅读量：

文章目录

  • 在整合Yarn时遇到错误或无法查看日志时，请采取以下措施
    • 请配置服务器以记录历史日志
    • 异常二：问题描述及处理流程

如果整合Yarn报错或无法查看log需做如下操作

配置hadoop的yarn-site.xml参数

复制代码 
     <property>
                <name>yarn.resourcemanager.hostname</name>
                <value>node01</value>
        </property>
        <property>
                <name>yarn.nodemanager.aux-services</name>
                <value>mapreduce_shuffle</value>
        </property>
    <!-- 关闭YARN内存检查 -->
    	<property>
                <name>yarn.nodemanager.pmem-check-enabled</name>
                 <value>false</value>
        </property>
        <property>

全部评论 (0)

还没有任何评论哟~

相关文章推荐