如何从减速机输出中的r-00000部分中删除-r-00000

Question

在我的MapReduce代码中，在reducer端，我实现了multipleOutput，并将inputsplit附加到它。我希望输出文件名作为keyvalue，而不是keyvalue-r-00000。如何删除尾随值。下面是我的代码。

String last = map.lastKey();
        String tab2[] = last.split(",");
        String line1 = "[" + tab2[2] + "," + tab2[3] + "," + tab2[8] + "]" + "\n" + "];";
        text1.set(line1);
        multipleOutputs.write(NullWritable.get(), text1, generateFileName(key));
    }

    String generateFileName(Text key){
        return key.toString();      
    }

    @Override
    public void setup(Context con){
        multipleOutputs = new MultipleOutputs<NullWritable, Text>(con);
    }

    @Override
    public void cleanup(final Context context) throws IOException, InterruptedException{
        multipleOutputs.close();
    }
}

Answer 1

根据Javadoc的多次输出，参数如下

write(KEYOUT key, VALUEOUT value, String baseOutputPath)

这里的第一个参数应该是key

是的

multipleOutputs.write(key, text1, generateFileName(key));

这对我有用。