输入路径不存在：文件：/D:/pigsample\u 1749383998\u 1377684507424

Question

我面临一个棘手的问题。我用最新版本的cygwin在windows7/64位机器上运行PIG 0.11。

我是一个博客，我想按用户名排序，将同一用户的所有用户活动放在一起，以供下一行处理。

我正在启动commandprompt-

脚本是：

USERACTIVITIES = LOAD '/D:/path/of/logs/useractivities' USING org.apache.pig.piggybank.storage.CSVExcelStorage(',') AS (datetimeUnProcessed:chararray, username:chararray, request:chararray);
 USERACTIVITIES_ORDERED = ORDER USERACTIVITIES by username;
STORE USERACTIVITIES_ORDERED INTO '/D:/readyfornextinput/useractivities' USING org.apache.pig.piggybank.storage.CSVExcelStorage(',');

当我演示USERACTIVITIES_ORDERED时，我看到它进展顺利。但当我储存/倾倒垃圾时，我会面临一个棘手的问题。

它失败了，说：java。lang.RuntimeException:org。阿帕奇。hadoop。mapreduce。lib。输入InvalidInputException：输入路径不存在：文件：/D:/pigsample\u 1749383998\u 1377684507424

当我试图搜索这个pigsample\u编号文件时，我可以在：D:/tmp//mapred/local/localRunner中找到它

我不知道这是怎么发生的。我不确定它是否与windows/cygwin相关，或者有人在Linux上也看到了这一点。

作为参考，您可以在此处找到stacktrace：

2013-08-28 15:38:28,863[Thread-46]WARNjob_local_0004LocalJobRunner-ask.java:370pigsample_1749383998_1377684507424RuntimeException：pigsample_1288777582_1377684802262InvalidInputException：输入路径不存在：file：/D：/org.apache.hadoop.mapred.在unner.java:214减少org.apache.hadoop.mapreduce.lib.input.WeightedRangePorg.apache.hadoop.mapreduce.lib.input.Conf（WeightedRangePormat.list）在ormat.java:235反射org.apache.pig.backend.hadoop.executionengine.mapConf（反射ormat.list）在org.apache.hadoop.util.反射tils.new实例（反射tils.java:117）在org.apache.hadoop.mapred.Map任务$NewOutputCollector。（MapTask.java:677）在org.apache.hadoop.mapred.MapTask.runNewMapper（MapTask.java:756）在org.apache.hadoop.mapred.MapTask.run（MapTorg.apache.hadoop.mapred.）在java.lang.LocalJobRunner$Job.run（LocalJobRorg.apache.pig.backend.hadoop.executionengine.map）由：ayer.partitioners.InvalidInputException：输入路径不存在：file：/D：/org.apache.hadoop.mapreduce.lib.input.在artitioner.setFileInputFartitioner.java:157状态（FileInputForg.apache.hadoop.util.）在tils.set减少层。PigFileInputFtils.java:62状态（PigFileInputF

这方面的任何帮助都会很有用。

Answer 1

看起来这只能在cygwin环境下再现。我在这里记录了根本原因和解决方案