在以下输入栏中使用Scrapy和send_keys

Question

我试图专注于twitter.com/login和send_keys（'foo'）的电子邮件输入，但是我运气不好。有人能告诉我为什么我的实现是错误的吗：

import time

from scrapy.spider import BaseSpider
from scrapy.selector import HtmlXPathSelector

from selenium import webdriver 

class MySpider(BaseSpider):
    name = "new"
    allowed_domains = ["twitter.com"]
    start_urls = ["https://www.twitter.com/login"]

    def __init__(self):
    self.driver = webdriver.Firefox()

    def parse(self, response):
    self.driver.get(response.url)
    time.sleep(1)

    #print response.body
    username = self.driver.find_element_by_class_name('email-input')
    username.click()
    username.clear()
    username.send_keys('foo')


    #self.driver.close()

任何帮助都将不胜感激。此外，当我尝试这样做时，我得到以下错误:

2015-08-22 15:44:09-0500[scrapy]DEBUG：Telnet控制台监听127.0.0.1:60232015-08-22 15:44:10-0500[new]DEBUG：重定向（301）到https://twitter.com/login

Answer 1

问题是，email input类中有多个元素，而第一个元素实际上是不可见的。您需要页面容器中的一个：

self.driver.find_element_by_css_selector("#page-container .email-input")