fanniao

fanniao

青山不改,绿水长流

威望 : 1 积分 : 2030 赞同 : 0 感谢 : 0

更多 »回复

0

请教下2个问题: 1、spark在运行任务时,如运行多个任务,怎么控制每个任务占用多少内存、CPU资源? 2、on yarn 和 alone,的控制资源方式,配置一样吗? 谢谢。

0

一般,干货太少,只是售前吹牛的东西

0

董老师,我用cdh5.5.1搭的环境,添加spark on yarn 组件后。直接执行: spark-shell ,启动日志里有这个警告,想问下,是少配置什么东西了吗(详细日志见附件)? 谢谢   16:14:33 WARN metrics.Metrics...

0

董老师,我们单位有:几十台的华为刀片机(存储较小)+ 1个磁盘阵列存储。想问下: 1、这个能搭hadoop环境吗? 2、能简单说hdfs放磁盘阵列的话,怎么设置? 谢谢。

更多 »发问

没有内容

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 1 积分: 2030 赞同: 0 感谢: 0

最后活跃:
2018-03-03 16:10
更多 » 关注 12

admin Dong bmchs wangwensheng mopishv0

更多 » 0 人关注
主页访问量 : 516 次访问