Estoy haciendo un scraping de una web que tiene al rededor de 60 hojas de paginación. y mi duda surge desde que el script pincha muchas veces por un timeout exception
. Pero como se recorren mas de 7k de productos, notaba que no era eficiente subir el tiempo de espera en WebDriverWait()
. Entonces se me ocurrió ¿Por qué no poner un while True
que intente buscar el elemento y una vez que lo encuentre salir?. Y ahora mi pregunta es, ¿Hay un problema si escribo el código de la siguiente manera?:
for articulo in articulos:
while True:
try:
ActionChains(browser).move_to_element(articulo).perform()
boton = WebDriverWait(articulo, 5).until(EC.element_to_be_clickable((By.XPATH, ".//button[contains(text(), 'QUICK VIEW')]")))
boton.click()
WebDriverWait(browser, 5).until(EC.visibility_of_element_located((By.CLASS_NAME, "modal-open")))
break
except:
print("Timeout ActionChains..")
Sin el while
funciona pero el tiempo a veces me juega una mala pasada, y si le agrego en vez de 5, 20 o 30, funciona pero como comentaba anteriormente, al iterar con muchos articulos, es una pérdida notable de tiempo. Estaré leyendo sus recomendaciones/sugerencias,
gracias.