《Hadoop MapReduce处理海量小文件：基于CombineFileInputFormat》的评论 http://shiyanjun.cn/archives/299.html 简单之美，难得简单，享受简单的唯美。 Wed, 19 Feb 2025 08:08:30 +0000 hourly 1 http://wordpress.org/?v=3.9.2 作者：高金山 http://shiyanjun.cn/archives/299.html#comment-62979 Wed, 31 Oct 2018 03:42:03 +0000 http://shiyanjun.cn/?p=299#comment-62979 大哥，这个类org.shirdrn.kodz.inaction.hadoop.smallfiles.IdentityReducer 我也没有，能发我一份么，谢谢了15600279582@163.com

]]> 作者：lanfz http://shiyanjun.cn/archives/299.html#comment-57970 Fri, 18 Nov 2016 07:06:31 +0000 http://shiyanjun.cn/?p=299#comment-57970 736333627@qq.com
大哥，org.shirdrn.kodz.inaction.hadoop.smallfiles.IdentityReducer; 你的这个类好像没有传上来哦，能发我一份么 谢谢了。

]]> 作者：y-m- http://shiyanjun.cn/archives/299.html#comment-57541 Tue, 14 Jun 2016 07:08:30 +0000 http://shiyanjun.cn/?p=299#comment-57541 我发现一个bug，是
byte[] content = lineRecordReader.getCurrentValue().getBytes();
currentValue.set(content, 0, content.length);

##############################
Returns the raw bytes; however, only data up to getLength() is valid.

]]> 作者：lumo http://shiyanjun.cn/archives/299.html#comment-57382 Wed, 27 Apr 2016 07:47:40 +0000 http://shiyanjun.cn/?p=299#comment-57382 我也没有，你收到了的话能发给我一份吗？1033132851@qq.com

]]> 作者：jiangzx http://shiyanjun.cn/archives/299.html#comment-55991 Tue, 01 Sep 2015 12:56:43 +0000 http://shiyanjun.cn/?p=299#comment-55991 不错，现在hadoop已经有自带的实现了：org.apache.hadoop.mapreduce.lib.input.CombineTextInputFormat

]]> 作者：Yanjun http://shiyanjun.cn/archives/299.html#comment-113 Fri, 25 Oct 2013 03:24:00 +0000 http://shiyanjun.cn/?p=299#comment-113 相关代码，可以到我的github上找到：https://github.com/shirdrn/hadoop/blob/master/src/main/java/org/shirdrn/hadoop/smallfiles/IdentityReducer.java

]]> 作者：至尊宝 http://shiyanjun.cn/archives/299.html#comment-102 Thu, 24 Oct 2013 07:38:59 +0000 http://shiyanjun.cn/?p=299#comment-102 402707192@qq.com  这是我邮箱，写到最后发现少了这个类。

]]> 作者：至尊宝 http://shiyanjun.cn/archives/299.html#comment-101 Thu, 24 Oct 2013 07:37:19 +0000 http://shiyanjun.cn/?p=299#comment-101 大哥，org.shirdrn.kodz.inaction.hadoop.smallfiles.IdentityReducer; 你的这个类好像没有传上来哦，能发我一份么 谢谢了。

]]>