当前位置: 首页 > 图灵资讯 > 技术篇> mapreduce常见参数和内存设置

mapreduce常见参数和内存设置

来源:图灵教育
时间:2023-04-21 10:02:50

https://www.tulingxueyuan.cn/d/file/p/20230421/xf2mxogxwyg.html 重点关注这篇文章 mr相关参数的配置,如

mapred-site.xml的:

<property>     <name>mapreduce.map.memory.mb</name>     <value>512</value> </property> <property>     <name>mapreduce.reduce.memory.mb</name>     <value>512</value> </property>

https://www.tulingxueyuan.cn/d/file/p/20230421/qlcjwxaidh2.html yarn 参数配置的 以下是参数配置的写作方法

比如yarn-site.xml的这个配置:

<property>     <name>yarn.scheduler.minimum-allocation-mb</name>     <value>100</value> </property> <property>     <name>yarn.scheduler.maximum-allocation-mb</name>     <value>1024</value> </property>

 

 

 

 

 

上一篇:

机器学习 二 输入

下一篇:

plsql安装过程