从twitter-python检索数据

Question

我正试图建立一个应用程序，用户将能够连接到我的应用程序，在twitter上输入关键字进行搜索，然后结果将被存储在数据库中。从用户输入关键词的那一刻起，我就想跟踪twitter上的内容。这些结果将被进一步分析，一些统计数据将呈现给用户。到目前为止，我已经使用tweppy和twitter流api来获取推文。但是我意识到我不能有一个以上的开放流连接(用于并行搜索多个关键字)。< br >我搜索了stackoverflow并找到了像断开连接、连接然后用新关键字搜索这样的解决方案，但在这种情况下，我将丢失数据。

我还查看了推特API，它最多可提供450个结果，15分钟：
https://dev.twitter.com/docs/rate-limiting/1.1/limits

流API：
-公共流不会提供超过个连接的机会
-站点流不会提供搜索的机会

Firehose API不是选项，因为太贵了。

我该如何解决这个问题？我看到许多应用程序实时搜索多个实例。以前有人遇到过这种情况吗？

Answer 1

您可以使用tweepy从sample或filter流endpoint收集所有tweets，并将其保存到数据库中。然后使用数据库只返回你的搜索词的推文。

如果您不想让tweets持续太久，那么使用redis这样的noSQL数据库并使用到期时间戳可能会有更好的结果，这样它就不会无限填满。