mapreduce输出了不想要的额外的文件

我在测试mapreduce,这个程序只有map处理,没有reduce,我的目标文件是00000-m-0000x系列的文件,但是输出目录下却同时输出了part-m-0000x系列的空文件,我不想让这些额外的空文件输出出来,改如何操作

wangxiaolei

赞同来自:

想要的是什么文件,描述的再详细点

余财源

赞同来自:

00000-m-00000这样的文件,是命令的我想要的输出文件,假如当前目录下输出了3个文件:00000-m-00000、_SUCESS、part-m-00000,我只想输出的文件是00000-m-00000,其他的两个文件都是空文件,我不想输出,该怎么办?

fish - Hadooper

赞同来自:

part-m- 是map使用context方式进行输出的文件,如果需要,对输出目录中的文件用个简单脚本处理一下应该就可以了吧?

余财源

赞同来自:

感谢老师的回答,这种方法可以,只是工作量又要增加了

要回复问题请先登录注册