工作中可能會遇到這種問題: 集群的spark工作內(nèi)存太小,比如只有50個G,如果想讓spark工作內(nèi)存變成100個G,則需要在CM控制臺修改以下兩個參數(shù) yarn.nodemanager.resource.memory-mb yarn.nodemanager.resource.cpu-vcores