from bs4 import BeautifulSoup
from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.support.ui import Select
from selenium.webdriver.chrome import options
import unittest
import time
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as EC
#Enlace a la pagina web
website = 'https://www.ncei.noaa.gov/access/monitoring/climate-at-a-glance'
path = ('../chromedriver') #dirección donde se encuentra el crhomedriver
driver = webdriver.Chrome(path)
driver.get(website)
driver.maximize_window()
#selección de los apartados a donde a donde se encuentra la información que busco
state_click = driver.find_element(by=By.XPATH, value='//*[@id="show-statewide"]/a').click()
time_series_click = driver.find_element(by=By.XPATH, value='.//*[@id="time-series"]/div[3]/button').click()
#selección de los años (para todos los archivos el mismo rango de 1950 - 2021)
star_year_dropdown =Select(driver.find_element(by=By.ID, value='begyear'))
star_year_dropdown.select_by_visible_text('1950')
end_year_dropdown = Select(driver.find_element(by=By.ID, value='endyear'))
end_year_dropdown.select_by_visible_text('2021')
#selección del parametro a descargar: Temperatura media
parameter_dropdown = Select(driver.find_element(by=By.ID, value='parameter'))
parameter_dropdown.select_by_visible_text('Average Temperature')
#Creación de un for apra que recorra todos los estados y todos los meses:
#selección del estado
select_state = driver.find_element(by=By.XPATH, value='.//*[@id="state"]')
opcion_state = select_state.find_elements(by=By.TAG_NAME, value='option')
#selección del mes
select_month = driver.find_element(by=By.XPATH, value = '//*[@id="month"]')
opcion_month = select_month.find_elements(by = By.TAG_NAME, value='option')
for option in opcion_month:
option.click()
for option in opcion_state:
option.click()
time.sleep(3)
plot = driver.find_element(by=By.XPATH, value='.//input[@id="submit"]').click()
dowload = WebDriverWait(driver, 10).until(EC.element_to_be_clickable((By.XPATH, '//*[@id="csv-download"]'))).click()
time.sleep(3)
El código funciona bien, pero en el plot y el dowload (al final del todo) al intentar hacer click da error y no se solucionarlo. Pienso que es debido a que en la página web al momento de ejecutar ese comando no está visualizado el botón de plotear la gráfica y descargar el csv. He probado modificando el tiempo de espera, pero nada. A ver si alguien me puede ayudar.
Gracias de antemano!!