He estado intentando hacer un web scraping en este sitio web https://www.segundamano.mx/anuncios/ciudad-de-mexico/alvaro-obregon/venta-inmuebles/casas
, usé una función empleando Bs4 como se muestra a continuación:
def scrape_page(page_url):
answer = requests.get(page_url)
content = answer.content
soup = BeautifulSoup(content, features='html.parser')
return soup
soup = scrape_page('https://www.segundamano.mx/anuncios/ciudad-de-mexico/alvaro-obregon/venta-inmuebles/casas')
print(soup)
El objeto soup me devuelve el texto HTML pero de forma extraña.
Cuando intento extraer elementos obtengo un objeto vacío:
elements_found = texto.find_all('p', class_='card-data-bottom-container-price')
Los tags y class aparecen en la página web, pero en la sopa solo aparece la información mas no los tags, quería saber si hay otra forma de hacer ese web scraping.
Gracias por la ayuda
content=urllib.urlopen(url).read()
, con eso te queda algo que ese parser puede procesar