对于 MapReduce 而言,每个作业的任务资源量可通过以下参数设置:
mapreduce.map.memory.mb :物理内存量,默认是 1024
mapreduce.map.cpu.vcores : CPU 数目,默认是 1
需要注意的是,默认情况,各个调度器只会对内存资源进行调度,不会考虑 CPU 资源,你需要在调度器配置文件中进行相关设置。
关于TWT使用指南社区专家合作厂商入驻社区企业招聘投诉建议版权与免责声明联系我们 © 2024talkwithtrend — talk with trend,talk with technologist京ICP备09031017号-30