Почему не парсятся данные
При многократном парсинге сайта с помощью selenium, на одних и тех же страницах то собирается информация, то нет причем ошибки во втором случае нет. С чем может быть связано? В случае если информация не была найдена, проверяю в ручную и нужные данные там точно есть.
Код для примера:
from selenium import webdriver
from bs4 import BeautifulSoup
driver = webdriver.Chrome(executable_path='C:\\..\chromedriver.exe')
url = ['http://www.yandex.ru/', 'https://www.google.com/']
for i in url:
driver.get(i)
time.sleep(2)
html = driver.find_element_by_xpath("//div[@id='content-
all']").get_attribute("innerHTML")`