Estoy scrapeando una página web, http://www.nowgoal.com que es a grandes rasgos una tabla donde en cada fila hay un link que te envía a una nueva página. El código es el siguiente
browser.get('http://www.nowgoal.com')
title=WebDriverWait(
browser,5).until(EC.presence_of_element_located((
By.CLASS_NAME,'Leaguestitle'))).text
print(title)
Idealmente, aquí obtendría una lista con todos los elementos que enlazan a una página, pero para el ejemplo, basta con 2 distintos.
links=browser.find_element_by_xpath('//*[@id="tr1_1475430"]/td[9]/div/div/a[3]')
lonks=browser.find_element_by_xpath('//*[@id="tr1_1365410"]/td[9]/div/div/a[3]')
El comportamiento de esta página es el de abrir una nueva pestaña cada vez que haces click, en lugar de cargar la nueva página sobre la principal. Es decir, si yo hago esto
links.click()
lonks.click()
Obtengo en el WebDriver además de la página inicial, 2 pestañas más. Mi teoría, si me lo puede confirmar alguien se lo agradecería, es que al seguir estando asociada la página principal a "browser", sigue siendo posible ejecutar lonks.click(). Pero que si al hacer links.click() se cargase la nueva página en la misma pestaña, browser pasaría a contener esta nueva página y por tanto lonks no encontraría el elemento a clicar. Esto es así, o lonks guarda la asignación y podría ejecutarse igualmente?
En cualquier caso, como quiero scrapear cosas de la página abierta por links, asocio a un nuevo elemento
perry=links.click()
y busco en la nueva página tal que así
tit=WebDriverWait(perry,20).until(EC.presence_of_element_located(
(By.XPATH,'//*[@id="teammain2"]/table[1]/tbody/tr/td[2]/table/tbody/tr[1]/td/h4/div/strong'))).text
Lamentablemente, obtengo el siguiente error
AttributeError: 'NoneType' object has no attribute 'find_element'
Supongo que se me escapa algo, porque soy bastante nuevo en la lógica detrás de hacer click y dónde se carga el elemento clicado. ¿Qué se me escapa?