使用Jsoup解析网站，该Jsoup在用户滚动时动态加载

Question

我正在做一个项目，通过使用JSOUP解析一个网站来显示歌曲名称和指向该歌曲的链接。唯一的问题是，我只能得到前10个元素，我想从那个网站，因为当你向下滚动，网站生成更多的元素。我试图解析的特定网站是一个名为Trappedio的音乐网站。你在查看网站时会注意到，当你向下滚动时，会出现更多的歌曲名称和图像。当我在chrome中使用inspect元素时，我看到当我滚动时，它生成了更多我试图解析的元素。

我正在解析的内容的CSS路径:#content>div.container>div>div:nth-child（元素的索引）

问题是当我使用这种方法使用Jsoup得到这个网站时,

Document doc = Jsoup.connect(url).get();

有什么想法吗？关于如何一次加载所有东西有什么建议吗？如有任何回应，我们将不胜感激，谢谢。

Answer 1

这是相当简单的，获得下一组10只需要点击以下

http://trapped.io/?page=2

一般说来，只需在page=page_number查询参数中输入适当的页码，就可以在该页面中得到一组10个元素。

只是一个附带说明，可能有法律问题在刮网站。我希望你已经重新检查了它的法律上可以做刮痧在他们的网站。