Resource Configuration

• yarn.nodemanager.resource.memory-mb

  配置每台机器可以提供的内存

• yarn.scheduler.maximum-allocation-mb

  配置每个 excutor 可以申请的最大内存

Spark源码分析之九：内存管理模型