网络爬虫是否读取WEB-INF文件夹内的JSP页面
我有一个使用jsp页面的网络应用程序。我故意没有把jsp页面放在WEB-INF文件夹中，因为jsp中只有最少的代码，而且因为当时（大约5年前）我读到网络爬虫找不到WEB-INF文件夹中的文件。因此影响了我的搜索引擎优化/排名/搜索引擎搜索结果。
我还将jsp文件的位置放在网站地图中。xml文件。我使用的是tomcat，该网站完全公开，没有登录/安全要求。
所以，快进到现在。我的网站排名不错，搜索结果也不错。我应该把JSP移到WEB-INF文件夹吗？5年前我的消息来源错了吗？
共有1个答案
你5年前读到的信息仍然适用。WEB-INF下的文件不能直接访问。
-
主要内容：认识爬虫,爬虫分类,爬虫应用,爬虫是一把双刃剑,为什么用Python做爬虫,编写爬虫的流程网络爬虫又称网络蜘蛛、网络机器人，它是一种按照一定的规则自动浏览、检索网页信息的程序或者脚本。网络爬虫能够自动请求网页，并将所需要的数据抓取下来。通过对抓取的数据进行处理，从而提取出有价值的信息。 认识爬虫 我们所熟悉的一系列搜索引擎都是大型的网络爬虫，比如百度、搜狗、360浏览器、谷歌搜索等等。每个搜索引擎都拥有自己的爬虫程序，比如 360 浏览器的爬虫称作 360Spider，搜狗的爬虫叫做
-
我刚刚开始使用JSP，遇到了一个问题。 据我所知，WEB-INF下的JSP页面可以通过浏览器在localhost中使用URL进行访问： 但是，如果我在WEB-INF文件夹（即'MyFolder'）中创建另一个子文件夹，并尝试通过URL访问相同的JSP页面： 它给出了一个错误404。JSP文件导航系统与HTML文件导航系统有区别吗？ 编辑：我正在使用servlet来显示我的JSP页面： EDIT2：
-
如何将本地存储文件夹中的JSP文件包含在WEB-INF下？ 我在config.properties定义了绝对路径${externalFolder}到包含外部jsp文件的文件夹，控制器映射到 /page和jsp页面page.jsp在WEB-INF/jsp/目录中。 在此文件页面中。我想调用的jsp： WEB-INF/jsp/page。jsp 谢谢你的帮助。
-
问题内容： 当我的jsp文件位于WEB-INF文件夹（如/WEB-INF/file.jsp）中时，我可以从本地主机访问它们：8080 / ProjectCtxtRoot /，但是如果将它们放在/ WEB-中，则无法访问它们。 INF / jsp / file.jsp？ 我更改了web.xml中的welcome-list标记中的路径，如下所示 我还更改了dispatcher-servlet.xml，
-
主要内容：导入所需模块,拼接URL地址,向URL发送请求,保存为本地文件,函数式编程修改程序本节讲解第一个 Python 爬虫实战案例：抓取您想要的网页，并将其保存至本地计算机。 首先我们对要编写的爬虫程序进行简单地分析，该程序可分为以下三个部分： 拼接 url 地址 发送请求 将照片保存至本地 明确逻辑后，我们就可以正式编写爬虫程序了。 导入所需模块 本节内容使用 urllib 库来编写爬虫，下面导入程序所用模块： 拼接URL地址 定义 URL 变量，拼接 url 地址。代码如下所示：
-
我正在尝试开发一个小的网络爬虫，它下载网页并搜索特定部分的链接。但当我运行这段代码时，“href”标记中的链接会变短。如： 原文链接：“/kids-toys-action-figures-accessories/b/ref=toys_hp_catblock_actnfig？ie=utf8&node=165993011&pf_rd_m=atvpdkikx0der&pf_rd_s=merchandis