kaiball9999

kaiball9999

Focus on bigdata

威望 : 0 积分 : 1130 赞同 : 0 感谢 : 0

更多 »回复

0

用的是0.9 的kafka ,不是auto commit ,(flume1.7 默认  auto commit为false) 是直接连kafka的broke的

0

flume 当节点比较多,日志服务器每一组一个业务,怎么管理,有企业级的方案吗? flume 貌似不支持LB +FailOver同时使用吧 当日志量大,为了保证不丢失,应该使用FileChannel,但是这样io很重,有这方面的经验吗?  

0

1.flume 日志服务器端宕机或者进程挂了容易丢失数据(使用memory )使用filechannel io 比较重,大公司是什么解决方案? 2.flume 的监控比较粗,不管是ganglia还是metrics ,当日志服务器比较多,每个关注的业务比较多,会...

0

怎么把一个text文件转化成parquet文件

0

driver 不需要计算,要的内存是用来干嘛的?一般是不是需要比较小的内存就ok?

更多 »发问

1

396 次浏览  • 2 个关注   • 2017-05-06

1

365 次浏览  • 2 个关注   • 2017-02-14

3

1050 次浏览  • 3 个关注   • 2017-01-21

1

447 次浏览  • 2 个关注   • 2017-01-03

0

256 次浏览  • 1 个关注   • 2016-12-22

发问

回复

文章

最新动态

详细资料

个人成就:

威望: 0 积分: 1130 赞同: 0 感谢: 0

最后活跃:
2017-05-18 16:15
更多 » 关注 13

wangxiaolei hello_world wangwensheng cenyuhai Dong

更多 » 0 人关注
关注 0 话题
主页访问量 : 472 次访问