ASP.NET使用HttpWebRequest读取远程网页源代码
读取远程网页能做什么就不用多说了吧，做小偷程序或是采集，也就诸如此类了吧。
public string GetPage(string url)
{
HttpWebRequest request = null;
HttpWebResponse response = null;
StreamReader reader = null;
try
{
request = (HttpWebRequest)WebRequest.Create(url);
request.Timeout = 20000;
request.AllowAutoRedirect = false;
response = (HttpWebResponse)request.GetResponse();
if (response.StatusCode == HttpStatusCode.OK && response.ContentLength < 1024 * 1024)
{
reader = new StreamReader(response.GetResponseStream(), System.Text.Encoding.Default);
string html = reader.ReadToEnd();
return html;
}
}
catch
{
}
finally
{
if (response != null)
{
response.Close();
response = null;
}
if (reader != null)
reader.Close();
if (request != null)
request = null;
}
return string.Empty;
}
-
<?php $http = HttpRequest::newSession(); $response = $http->get('http://www.baidu.com/'); $content = $response->body(); // 网页源码
-
本文向大家介绍php读取远程gzip压缩网页的方法，包括了php读取远程gzip压缩网页的方法的使用技巧和注意事项，需要的朋友参考一下 今天在调取一家商城的页面信息时候，使用file_get_contents抑或curl： 都得到一片乱码，查看了许多内容，包括页面的header信息，发现原来页面使用了。 类似的信息，即Content-Encoding为gzip，即该站点开启了gzip压缩。
-
问题内容： 我正在寻找一种简单的方法来获取位于远程服务器上的文件。为此，我在Windows XP上创建了本地ftp服务器，现在我想为测试Applet提供以下地址： 当然，我会收到以下错误： URI方案不是“文件” 我一直在尝试其他方法来获取文件，但它们似乎没有用。我该怎么办？（我也很想执行HTTP请求） 问题答案： 您不能使用ftp开箱即用。 如果文件位于http上，则可以执行以下操作： 如果要使
-
本文向大家介绍C#获取网页源代码的方法，包括了C#获取网页源代码的方法的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了C#获取网页源代码的方法。分享给大家供大家参考。具体如下： 希望本文所述对大家的C#程序设计有所帮助。
-
我已经考虑了很长一段时间了。我正在尝试从雅虎的股票API下载数据。当您使用 API 时，它会为您提供一个文件。我一直在看opencsv，这似乎很完美，除了我想避免下载和保存文件，如果可能的话。 根据示例，OpenCSV只能从中读取。根据Oracle关于的文档，文件需要是本地的。 是否可以使用 OpenCSV 从远程文件读取而不下载？
-
我无法从以下网页中读取电子邮件id： 网址：https://targetstudy.com/university/2/acharya-ng-ranga-agricultural-university/ 这是我的代码