没有这样的元素:无法在生产环境中使用chromedriver和Selenium找到元素

Question

我对硒铬驱动程序有问题，我无法弄清楚是什么原因造成的。几周前一切正常，突然出现此错误。 问题来自以下函数。

def login_(browser):
try:
browser.get("some_url")
# user credentials
user = browser.find_element_by_xpath('//*[@id="username"]')
user.send_keys(config('user'))
password = browser.find_element_by_xpath('//*[@id="password"]')
password.send_keys(config('pass'))
login = browser.find_element_by_xpath('/html/body/div[1]/div/button')
login.send_keys("n")
time.sleep(1)
sidebar = browser.find_element_by_xpath('//*[@id="sidebar"]/ul/li[1]/a')
sidebar.send_keys("n")
app_submit = browser.find_element_by_xpath('//*[@id="sidebar"]/ul/li[1]/ul/li[1]/a')
app_submit.send_keys("n")
except TimeoutException or NoSuchElementException:
raise LoginException

此函数在开发环境 (macOS 10.11( 中没有问题，但在生产环境中会引发以下错误：

Message: no such element: Unable to locate element: {"method":"xpath","selector":"//*[@id="sidebar"]/ul/li[1]/a"}
(Session info: headless chrome=67.0.3396.79)
(Driver info: chromedriver=2.40.565383 (76257d1ab79276b2d53ee97XXX),platform=Linux 4.4.0-116-generic x86_64)

我已经在每个环境中更新了Chrome和chromedriver(分别为v67和2.40(。我也给了它更多的time.sleep(15).但问题仍然存在。我的最新猜测是，也许网络驱动程序的初始化无法正常工作：

def initiate_webdriver():
option = webdriver.ChromeOptions()
option.binary_location = config('GOOGLE_CHROME_BIN')
option.add_argument('--disable-gpu')
option.add_argument('window-size=1600,900')
option.add_argument('--no-sandbox')
if not config('DEBUG', cast=bool):
display = Display(visible=0, size=(1600, 900))
display.start()
option.add_argument("--headless")
else:
option.add_argument("--incognito")
return webdriver.Chrome(executable_path=config('CHROMEDRIVER_PATH'), chrome_options=option)

因为，如果Display不起作用，那么可能没有提到的sidebar而是其他一些按钮。

所以我的问题是：有人遇到过类似的问题吗？有没有办法知道驱动程序在寻找此类元素时页面显示的内容？

Answer 1

据报道，在您提供登录名后，该元素未找到错误，因此我认为登录失败并且页面重定向到某个地方。您可以使用屏幕截图选项截取页面的屏幕截图，然后查看驱动程序加载的页面。

driver.save_screenshot("path to save screen.jpeg")

您还可以保存原始 html 代码并检查同一页面。

网络驱动程序屏幕截图

在 Python 中使用 Selenium 在 Firefox 上保存网页

Answer 2

根据login_(browser)方法的几件事：

• 当您通过以下方式识别"登录"按钮时：

  login = browser.find_element_by_xpath('/html/body/div[1]/div/button')
  

  我建议宁愿通过login.click()调用send_keys("n")onclick((事件的帮助来模拟登录按钮的单击，如下所示：

  login = browser.find_element_by_xpath('/html/body/div[1]/div/button')
  login.click()
  

• 接下来，当您识别侧边栏时，会诱导WebDriverWait元素可单击，如下所示：

  WebDriverWait(driver, 20).until(EC.element_to_be_clickable((By.XPATH, '//*[@id="sidebar"]/ul/li[1]/a'))).click()
  

• 正如您提到的，您的代码块在macOS 10.11环境中完美运行，但在生产环境 (Linux( 中抛出以下错误，不同的浏览器很可能在不同的操作系统架构中以不同的方式呈现HTML DOM。因此，您必须使用相对xpath，而不是绝对 xpath，如下所示：

  WebDriverWait(driver, 20).until(EC.element_to_be_clickable((By.XPATH, "//a[@attribute='value']"))).click()
  

根据initiate_webdriver()方法的几件事：

• 根据无头Chrome入门，参数--disable-gpu仅适用于Windows，但不适用于Linux操作系统的有效配置。所以需要删除：

  option.add_argument('--disable-gpu')
  

注意：您必须添加以下导入：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as EC

Answer 3

每当我在硒中遇到这样的奇怪问题时，我更喜欢重试以找到导致间歇性麻烦的特定元素。一种方法是将其包裹在 try-except 块周围：

try:
sidebar = browser.find_element_by_xpath('//*[@id="sidebar"]/ul/li[1]/a')
except NoSuchElementException:
time.sleep(10)
print("Unable to find element in first time, trying it again")
sidebar = browser.find_element_by_xpath('//*[@id="sidebar"]/ul/li[1]/a')

您还可以将try代码放入具有合适计数变量的循环中，以使自动化代码正常工作。(检查这个(。根据我对JAVA的经验，这个想法已经解决了多个问题。

Answer 4

您需要等到元素可见，否则将收到此错误。 尝试这样的事情：

from selenium.webdriver.support.wait import WebDriverWait
from selenium.webdriver.support.expected_conditions import visibility_of_element_located
from selenium.webdriver.common.by import By
TIMEOUT = 5
...
xpath = '//*[@id="sidebar"]/ul/li[1]/a'
WebDriverWait(self.selenium, TIMEOUT).until(visibility_of_element_located((By.XPATH, xpath)))
browser.find_element_by_xpath(xpath)
...