Selenium Webdriver刮擦，陈旧元素

Question

我正在写一个小的抓取程序，它导航到一个包含链接列表的页面，

它单击第一个链接，打开一个新页面，获取一些详细信息，然后导航回包含链接列表的页面，然后尝试查找下一个链接，但我得到：

组织。openqa。硒。StaleElementReferenceException:stale元素引用：元素未附加到页面文档

你知道我该怎么避免吗？

package scraping;

import java.util.List;
import java.util.concurrent.TimeUnit;

import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.chrome.ChromeDriver;

import org.testng.Assert;
import org.testng.annotations.AfterClass;
import org.testng.annotations.BeforeClass;
import org.testng.annotations.Test;

public class yell {

    private WebDriver driver;

    @BeforeClass
    public void beforeClass() {

        System.setProperty("webdriver.chrome.driver", "C:\\Selenium\\ChromeDriver\\chromedriver.exe");

        driver = new ChromeDriver();

    }

    @Test
    public void verifySearchButton() throws InterruptedException {

        driver.manage().timeouts().implicitlyWait(10, TimeUnit.SECONDS);

        driver.get(
                "https://www.yell.com/ucs/UcsSearchAction.do?scrambleSeed=1634428901&keywords=farmers&location=bedfordshire");

        List<WebElement> linkList = driver.findElements(By.xpath("//a [@class='businessCapsule--title']"));

        Thread.sleep(2000);

        for (int i = 0; i < linkList.size(); i++) {

            System.out.println(linkList.get(i).getText());
            System.out.println(linkList.get(i).getAttribute("href"));

            linkList.get(i).click();

            System.out.println("count start = " + i);

            Thread.sleep(2000);

            WebElement Add1 = driver.findElement(By.xpath("//span[contains(@itemprop,'streetAddress')]"));
            String Add1val = Add1.getText();

            WebElement Add2 = driver.findElement(By.xpath("//span[contains(@itemprop,'addressLocality')]"));
            String Add2val = Add2.getText();

            WebElement Add3 = driver.findElement(By.xpath("//span[contains(@itemprop,'postalCode')]"));
            String Add3val = Add3.getText();

            WebElement tel = driver.findElement(By.xpath("//span[contains(@class,'business--telephoneNumber')]"));
            String telval = tel.getText();

            System.out.println(Add1val + " , " + Add2val + " , " + Add3val + " , " + telval);

            driver.navigate().back();

            System.out.println("count end = " + i);

        }

    }

    @AfterClass
    public void afterClass() {
        driver.quit();
    }

}

Answer 1

当您跟踪链接时，DOM正在重建，导致您在link list中拥有的每个元素都失去与当前页面的任何关系，因此出现了StaleElementReequceExc0019。

如果你想访问第一页列出的所有链接，最好保留链接，而不是元素本身。

List<String> linkList = driver.findElements(By.xpath("//a [@class='businessCapsule--title']"))
  .stream()
  .map(element -> element.getAttribute("href"))
  .collect(Collectors.toList());

现在，当您有链接列表时，您可以直接跟随任何后续链接，而不是单击特定的元素。

    driver.get(linkList.get(i));