4.8.3. ## 问题描述¶
Spark启动报错:java.lang.IllegalStateException: Spark context stopped while waiting for backend
## 解决方案 原因:由于Java 8与Hapdoop0的Yarn存在某些不兼容,造成内存的溢出,导致程序异常终止。 解决: 修改 yarn-site.xml文件
<property>
<name>yarn.nodemanager.pmem-check-enabled</name>
<value>false</value>
</property>
<property>
<name>yarn.nodemanager.vmem-check-enabled</name>
<value>false</value>
</property>