如何使用HDInsight.NET SDK提交mahout推荐作业

Question

我是新来的。我想学习和实践机器学习，HDInsight正是我想要的，但似乎没有直接的API到Mahout。由于mahout推荐将从本质上转换为mapredure作业，因此我遵循Windows Azure文档中的一些mapreduce示例，编写了以下代码：

// Define the MapReduce job
MapReduceJobCreateParameters mrJobDefinition = new MapReduceJobCreateParameters()
{
    JarFile = "wasb:///example/jars/mahout-core-0.9-job.jar",
    ClassName = "org.apache.mahout.cf.taste.hadoop.item.RecommenderJob",
};

mrJobDefinition.Arguments.Add(" -s SIMILARITY_COOCCURRENCE");
mrJobDefinition.Arguments.Add(" --input=/reply");
mrJobDefinition.Arguments.Add(" --output=/recommend/");
mrJobDefinition.Arguments.Add(" --usersFile=/data/users.txt");

我已经将“mahout-core-0.9-job.jar”上传到指定的Azure blob存储容器中的/example/jars。

在我搜索了internet之后，似乎应该对mapred-site.xml或其他hadoop配置文件进行一些更改，但我对Apache hadoop完全陌生，对Linux和Java也不太了解。

任何帮助或指导都将不胜感激。

Answer 1

使用最新的.NET SDK for Hadoop(http://hadoopsdk.codeplex.com/)，我可以成功提交使用相同代码的mahout作业。似乎这个问题已经由SDK解决了。