Selenium Web驱动程序抓取,陈旧元素



我正在写一个小的抓取程序,它导航到一个带有链接列表的页面,

它点击第一个链接,打开一个新页面,获取一些详细信息,然后导航回带有链接列表的页面,然后它试图找到下一个链接,但我得到了:

org.openqa.selenium.StaleElementReferenceException:陈旧元素引用:元素未附加到页面文档

知道我该怎么避免这种情况吗?

package scraping;
import java.util.List;
import java.util.concurrent.TimeUnit;
import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.chrome.ChromeDriver;
import org.testng.Assert;
import org.testng.annotations.AfterClass;
import org.testng.annotations.BeforeClass;
import org.testng.annotations.Test;
public class yell {
private WebDriver driver;
@BeforeClass
public void beforeClass() {
System.setProperty("webdriver.chrome.driver", "C:\Selenium\ChromeDriver\chromedriver.exe");
driver = new ChromeDriver();
}
@Test
public void verifySearchButton() throws InterruptedException {
driver.manage().timeouts().implicitlyWait(10, TimeUnit.SECONDS);
driver.get(
"https://www.yell.com/ucs/UcsSearchAction.do?scrambleSeed=1634428901&keywords=farmers&location=bedfordshire");
List<WebElement> linkList = driver.findElements(By.xpath("//a [@class='businessCapsule--title']"));
Thread.sleep(2000);
for (int i = 0; i < linkList.size(); i++) {
System.out.println(linkList.get(i).getText());
System.out.println(linkList.get(i).getAttribute("href"));
linkList.get(i).click();
System.out.println("count start = " + i);
Thread.sleep(2000);
WebElement Add1 = driver.findElement(By.xpath("//span[contains(@itemprop,'streetAddress')]"));
String Add1val = Add1.getText();
WebElement Add2 = driver.findElement(By.xpath("//span[contains(@itemprop,'addressLocality')]"));
String Add2val = Add2.getText();
WebElement Add3 = driver.findElement(By.xpath("//span[contains(@itemprop,'postalCode')]"));
String Add3val = Add3.getText();
WebElement tel = driver.findElement(By.xpath("//span[contains(@class,'business--telephoneNumber')]"));
String telval = tel.getText();
System.out.println(Add1val + " , " + Add2val + " , " + Add3val + " , " + telval);
driver.navigate().back();
System.out.println("count end = " + i);
}
}
@AfterClass
public void afterClass() {
driver.quit();
}
}

当你点击链接时,DOM正在重建,导致linklist中的每个元素都失去了与当前页面的任何关系,因此StaleElementReferenceException

如果你想访问第一页上列出的所有链接,最好保留链接,而不是元素本身。

List<String> linkList = driver.findElements(By.xpath("//a [@class='businessCapsule--title']"))
.stream()
.map(element -> element.getAttribute("href"))
.collect(Collectors.toList());

现在,当您有了链接列表时,您可以直接关注任何后续链接,而不是单击特定元素。

driver.get(linkList.get(i));

最新更新