可以使用浏览器访问URL，但不能使用工作代码

Question

我想检查一堆URL是否正常工作。因此，我编写了一些代码（如下所示）来实现这一点。它适用于像谷歌这样的网站。通用域名格式。当我把它应用到我的场景中时，它失败了。

我正在登录虚拟机。从这个虚拟机，我可以在浏览器中打开所需的URL。当我尝试检查是否可以用代码连接到URL时，它失败了。我的代码从文件中获取的URL是正确的，可以在浏览器上运行。因此，排除了URL中的错误。

我的服务器URL如下所示-

ab-web-internal-test-005.myweb.com

如何调试此问题并使代码能够连接到URL？

这是一个例外：

C:/mycode/>ruby LinkTester.rb
C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:878:in `initialize': No connection could be made because the target machine actively refused it. -
 connect(2) (Errno::ECONNREFUSED)
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:878:in `open'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:878:in `block in connect'
        from C:/Ruby200-x64/lib/ruby/2.0.0/timeout.rb:52:in `timeout'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:877:in `connect'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:862:in `do_start'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:851:in `start'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:582:in `start'
        from C:/Ruby200-x64/lib/ruby/2.0.0/net/http.rb:477:in `get_response'
        from LinkTester.rb:9:in `connect_to_url'
        from LinkTester.rb:38:in `block in <main>'
        from LinkTester.rb:37:in `each'
        from LinkTester.rb:37:in `<main>'

代码-

require "net/http"
require "uri"

def connect_to_url(url)
  response = nil
  encoded_uri = URI.encode(url)
  uri = URI.parse(encoded_uri)

  response = Net::HTTP.get_response(uri)
  http = Net::HTTP.new(uri.host, uri.port)
  response = http.request(Net::HTTP::Get.new(uri.request_uri))

  case http_response
  when Net::HTTPSuccess
    puts  uri + "success"
  when Net::HTTPRedirect
    puts  uri + "success"
  else
    puts uri + "failure"
  end
end

def get_urls(file_path)

  array = Array.new
  file = File.open(file_path, "r")
  file.each_line do |line|
    array << line
  end
  file.close
  return array
end

url_file = "C:/mycode/servers.txt"
url_array = get_urls(url_file);

url_array.each do |url|
  connect_to_url(url)
end

Answer 1

根据铁皮人的解释，将尝试使用typhoeus概念来回答：

require 'typhoeus'

File.readlines('C:/mycode/servers.txt').each do |server_uri|
  puts Typhoeus::Request.new(server_uri).run.code
end

Answer 2

比较浏览器和HTTP代理并不特别有用。浏览器确实使用了类似的底层技术，但是它有很多其他的代码试图像小狗一样有弹性和友好。除非您知道浏览器在尝试向用户呈现有用内容时还会做什么，否则调试URL和HTTP可能会很困难。在IRB中使用OpenURI或提供控制台的其他宝石之一可能会做得更好，或者在命令行中使用cURL，因为这样您可以更好地控制行为。

你的代码没有处理重定向。您使用与成功相同的消息处理重定向响应，这是不正确的，因为它们不是同一事物，但您无法区分哪个是哪个。

HTTP是一个用于创建HTTP服务的低级库，但是，因为它是低级库，所以您必须告诉它如何执行所有操作。如果您正在创建自己的新服务，那么这很好，但是对于检索页面，您可以更轻松地使用OpenURI或其他gem来处理您的访问，这些访问确实实现了重定向，如加铺、台风、HTTPClient、RestClient、HttpParty等。

如果要使用::HTTP，则需要实现完整的重定向处理代码，该代码在留档中给出。