当前位置: 首页 > 知识库问答 >
问题:

大量获取维基百科摘录

呼延才俊
2023-03-14

有办法从维基百科获得所有标题/摘录对吗?到那一刻,我发现了两种方法

  • 下载摘录转储,但它包含不完整/无效的摘录,我想是作为文章的第一行。
  • 使用MediaWiki API请求摘录,但它非常慢,因为每个请求只能获得单个摘录(批量查询不适用于摘录):

/w/api.php?action=query

我想获得摘录,因为它们是由MediaWiki API生成的,而不需要负担维基百科服务器。可能吗?

顺便说一句,我需要摘录为纯文本。不需要wiki文本或格式。

使现代化通过MediaWiki API一次最多可以获得20篇摘录:

看见https://en.wikipedia.org/w/api.php?action=help

共有1个答案

曹泉
2023-03-14

目前是不可能的。Cou可以在垃圾堆中查看雅虎的摘要,这些摘要试图做类似的事情(尽管不是很好)。它们由Active抽象扩展提供支持。

 类似资料:
  • 我试图从维基百科页面的摘要部分提取链接。我尝试了以下方法: 此url提取页面的所有链接:https://en.wikipedia.org/w/api.php?action=query 对于提取与任何节关联的链接,我可以根据节id进行过滤-例如。, 对于同一页面的部分,我可以使用以下url:https://en.wikipedia.org/w/api.php?action=parse 对于同一页面的

  • 我一直在尝试获取一个可能的结果列表(与在维基百科中搜索时得到的结果相同)和一个小的文章摘要,通常是第一段。 到目前为止,我能得到的要么是标题列表: https://en.wikipedia.org/w/api.php?action=query 或单个页面的摘要: https://en.wikipedia.org/w/api.php?action=query 是否有可能以类似于此的形式组合这两个查询

  • 在本章中,我展示了上一个练习的解决方案,并分析了 Web 索引算法的性能。然后我们构建一个简单的 Web 爬虫。 15.1 基于 Redis 的索引器 在我的解决方案中,我们在 Redis 中存储两种结构: 对于每个检索词,我们有一个URLSet,它是一个 Redis 集合,包含检索词的 URL。 对于每个网址,我们有一个TermCounter,这是一个 Redis 哈希表,将每个检索词映射到它出

  • 问题内容: 例如,使用此Wikipedia转储: http://en.wikipedia.org/w/api.php?action=query&prop=revisions&titles=lebron%20james&rvprop=content&redirects=true&format=xmlfm 我是否可以使用现有的Python库来创建带有主题和值映射的数组? 例如: 问题答案: 看来您确实

  • 维基百科离线阅读器,支持索引官方dump!

  • 问题内容: 我需要获取任何电影的信息框的内容。我知道电影的名字。一种方法是获取Wikipedia页面的完整内容,然后解析它,直到找到并获取信息框的内容。 使用某些API或解析器,是否还有其他方法可以实现? 我正在使用Python和pywikipediabot API。 我也熟悉wikitools API。因此,如果有人具有与wikitools API相关的解决方案,请不要使用pywikipedia