首页 > 图灵资讯 > 技术篇>正文

mapreduce常见参数和内存设置

2023-04-21 10:02:50

https://www.tulingxueyuan.cn/d/file/p/20230421/xf2mxogxwyg.html 重点关注这篇文章 mr相关参数的配置,如

mapred-site.xml的:

<property>     <name>mapreduce.map.memory.mb</name>     <value>512</value> </property> <property>     <name>mapreduce.reduce.memory.mb</name>     <value>512</value> </property>

https://www.tulingxueyuan.cn/d/file/p/20230421/qlcjwxaidh2.html yarn 参数配置的 以下是参数配置的写作方法

比如yarn-site.xml的这个配置:

<property>     <name>yarn.scheduler.minimum-allocation-mb</name>     <value>100</value> </property> <property>     <name>yarn.scheduler.maximum-allocation-mb</name>     <value>1024</value> </property>

 

 

 

 

 

上一篇 机器学习 二 输入
下一篇 plsql安装过程

文章素材均来源于网络,如有侵权,请联系管理员删除。