张晓慧

张晓慧

威望 : 0 积分 : 2955 赞同 : 0 感谢 : 0

更多 »回复

0

我们这边业务系统不大允许你直接联邦模式访问的,业务系统里面访问很多hdfs的路径的,要全部换掉是很大的动作。还一个hive和spark应用访问也有些毛病…

0

你们搭建集群的时候一开始就会这样子弄么

0

找到问题了,是根本没找到匹配数据,没有进入map函数,所以context.progress()没起作用

0

fullgc了,内存不够了。你可以搜搜yarn设置进程启动和container内存限制的参数,一直读没有写的只能检查你的代码逻辑了

更多 »发问

5

17 次浏览  • 2 个关注   • 2018-02-23

2

13 次浏览  • 2 个关注   • 2018-02-23

1

16 次浏览  • 2 个关注   • 2018-02-23

1

15 次浏览  • 2 个关注   • 2018-02-23

1

10 次浏览  • 2 个关注   • 2018-02-23

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 0 积分: 2955 赞同: 0 感谢: 0

最后活跃:
2018-02-24 11:30
更多 » 关注 8

CrazyJvm mengmeng wangwensheng 傲风寒 ChinaHadoop

更多 » 1 人关注

木舟

关注 3 话题
主页访问量 : 118 次访问