将Storm-wordCount拓扑转换为使用Kafka喷口

Question

我是Storm和Kafka的新手，我可以在一段时间后在本地虚拟机上安装它们。我目前有一个有效的wordCount拓扑，从dropBox文本文件中提取句子：

public void nextTuple() {


 final String APP_KEY = "XXXX";
final String APP_SECRET = "XXXX";
DbxAppInfo appInfo = new DbxAppInfo(APP_KEY, APP_SECRET);
DbxRequestConfig config = new DbxRequestConfig("StormTopology/1.0", Locale.getDefault().toString());
String accessToken = "XXXXXXXX";
DbxClient client = new DbxClient(config, accessToken);
String sentence="";
try {FileOutputStream outputStream = new FileOutputStream("fromSpout.txt"); 
try {
    //client.delete("/*.txt");
   DbxEntry.File downloadedFile = client.getFile("/spout.txt", null,outputStream);

   sentence= readFile("fromSpout.txt");          
   if (sentence==null || sentence == "" || sentence == " " || sentence == "/t") {
           Utils.sleep(1000);
           return;
           }                    
        } 
catch (DbxException ex) {  } 
catch (IOException ex) { }       
        //return 1;
finally {
      outputStream.close();
         }
    }
catch (FileNotFoundException ex){}
catch (IOException ex) {}       


if (sentence.length()<2) {  Utils.sleep(10000);  return; }
try { client.delete("/spout.txt");}
 catch (DbxException ex) {  } 
_collector.emit(new Values(sentence)); 
Utils.sleep(1000);      

现在我想升级我的喷口，使用Kafka的文本，以便在拓扑结构中提交到我的下一个螺栓。我试图在git中遵循许多文章和代码，但没有任何成功。例如：这个Kafka喷口。谁能帮助我，给我一些方向，以便实现新的spout.java文件？谢谢你！

Answer 1

从Storm0.9.2发布，有一个外部StormKafka包可以做到这一点。实际上，这个包是从暴风-kafka-0.8-plus贡献回暴风社区的。并且有一个测试项目展示了它的使用情况。

在细节中，首先添加依赖到你的maven（或lein/gradle）：

groupId: org.apache.storm
artifactId: storm-kafka
version: 0.9.2-incubating

然后像这样创建拓扑和喷口：

import storm.kafka

TridentTopology topology = new TridentTopology();
BrokerHosts zk = new ZkHosts("localhost");
TridentKafkaConfig spoutConf = new TridentKafkaConfig(zk, "test-topic");
spoutConf.scheme = new SchemeAsMultiScheme(new StringScheme());
OpaqueTridentKafkaSpout spout = new OpaqueTridentKafkaSpout(spoutConf);