Preguntas con la etiqueta [beautifulsoup]

Beautiful Soup es una librería de Python para extraer datos de archivos HTML y XML.

71 preguntas con respuestas sin votos o no aceptadas
Filtrar por
Ordenado por
Etiquetadas con
1 voto
1 respuesta
137 vistas

No puedo hacer un Web Scraping en una página web

He estado intentando hacer un web scraping en este sitio web https://www.segundamano.mx/anuncios/ciudad-de-mexico/alvaro-obregon/venta-inmuebles/casas, usé una función empleando Bs4 como se muestra a ...
Adrian Noli's user avatar
1 voto
1 respuesta
326 vistas

Webscraping: descargar pdf de una web con paginación: no se descargan los pdf de todas las páginas

Soy nuevo en webscraping. Estoy tratando de descargar pdfs de [esta página][1], que tiene paginación (del 1 al 7). El código que he hecho solo descarga pdf de las dos primeras páginas y no encuentro ...
Ivan A. Ramírez Zapata's user avatar
1 voto
0 respuestas
45 vistas

No descargo la totalidad de información de precios de una web

estoy empezando con el web scrapping y quiero obtener precios de una web que tiene varias páginas, tengo el siguiente código: from urllib.request import urlopen from bs4 import BeautifulSoup as soup ...
Alexis's user avatar
  • 11
1 voto
0 respuestas
33 vistas

¿Cómo puedo entrar al mercado de Steam con mi cuenta usando BeautifulSoup?

Hace un par de meses desarrolle un código usando BeautifulSoup que me permitía entrar al mercado de Steam con mi cuenta, a través del uso de cookies. El problema es que hoy mi código ya no reconoce la ...
Lautaro Casalini's user avatar
1 voto
0 respuestas
324 vistas

¿Cómo puedo capturar las href con BeautifulSoup?

estoy iniciando con web scraping y trato de capturar todas las noticias referidas a la palabra fraude, sin embargo, mi selector sólo extrae los 10 primeros href. import requests import bs4 import ...
Pedro's user avatar
  • 11
1 voto
0 respuestas
239 vistas

Problema al hacer Web Scraping a página que no tiene el mismo contenido HTML en el código fuente

Estoy practicando Web Scraping con requests (para hacer la petición) y BeautifulSoup para hacer el parseo, mis pruebas funcionaban perfectamente hasta que me encontré con una página web que se podría ...
Mark Elon Gates Bezos's user avatar
1 voto
2 respuestas
100 vistas

python error al convertir en float

Que tal retomando un proyecto en python utilizando selenium, y BeautifulSoup una ves hago correr me sale el mensaje "could not convert string to float: ''", cuando imprimo lat y lng, pero ...
DAVE's user avatar
  • 83
1 voto
0 respuestas
30 vistas

Problema obteniendo precios, request y beautifulsoup

Estoy teniendo algunos problemas para obtener la información de los precios de la página de Amazon en el mercado estadounidense, en otros mercados no he tenido ningún problema, pero aquí parece que no ...
Rocío Jiménez Díaz's user avatar
1 voto
0 respuestas
88 vistas

Problema al hacer scraping con Python a una página dinámica PHP

Al hacer un request.get a una pagina.php para consumir una tabla y luego extraerla con BeautifulSoup ésta llega sin contenido. Estoy utilizando las siguientes librerias: urlopen, requests, ...
Alex-Condori's user avatar
1 voto
0 respuestas
201 vistas

Web scraping web dinámica con Selenium y captar código HTML final con Beautiful Soup

Hace días que me rompo la cabeza con este problema, estoy realizando web scraping de un buscador de jurisprudencia, como es una web dinámica utilizo Selenium para que ajuste los filtros realice la ...
Maria's user avatar
  • 11
1 voto
0 respuestas
111 vistas

BeautifulSoup: Scrapear celda a celda

Intento explicar mi situación por si alguien puede echarme una mano. Estoy intentando extraer los datos de una tabla con la siguiente estructura: Equipo 1 - Resultado - Equipo 2 - Minuto primer gol Es ...
nokvk's user avatar
  • 117
1 voto
1 respuesta
83 vistas

BeautifulSoup y obtener un dato vacío

Hola tengo un fragemento de código y quiero obtener el valor correspondiente. Utilizo la función next_sibling para obtener el dato, pero querría como hacer para encontrar el dato vacío from bs4 import ...
Julio's user avatar
  • 11
1 voto
1 respuesta
104 vistas

Web Scraping en python

Estoy aprendiendo a utilizar el modulo bs4 de python para escrapear la web. Lo que estoy intentando hacer es obtener el puntaje de un videojuego en metacritic y buscando por internet y preguntas ...
Juani Battiston's user avatar
1 voto
0 respuestas
34 vistas

como modifico los datos en un dataframe, creado a partir de una web?

No logro modificar un dataframe que creé basado en datos de una web, baje los datos con la llibrería BeautifulSoup y luego creé el dataframe con Pandas, y ahora no logro modificarlo como lo necesito. ...
Andrés Domínguez's user avatar
1 voto
0 respuestas
710 vistas

"AttributeError: 'NoneType' object has no attribute 'find_all'"

estaba realizando este script para rascar en Dateas.com y de pronto comenzó a fallar. br = mechanize.Browser() br.set_handle_robots(False) br.set_handle_equiv(False) br.addheaders = [('User-agent', '...
aKratos's user avatar
  • 111
1 voto
0 respuestas
104 vistas

Obtener el numero de filas de una tabla HTML con BeautifulSoup4

Estoy creando una herramienta con la cual necesito obtener la cantidad de filas de la primera columna que hay en una tabla. Específicamente de la tabla principal de esta página y para ello estoy ...
Nick Cam's user avatar
  • 330
1 voto
0 respuestas
66 vistas

Obtener <a>este texto</a> usando BeautifulSoup4

He encontrado con éxito la tabla y la columna usando: table = soup.find('table', class_='sortable') table_buy_rows = table.find_all('tr') for tr in table_buy_rows: td = tr.find('a') print(td) ...
Nick Cam's user avatar
  • 330
1 voto
0 respuestas
688 vistas

Con web scraping en Python, cómo extraer una palabra de un texto?

Buen día, Estoy tratando de separar una palabra del texto para poder añadirle un "CUALQUIER COSA" en medio del texto y de esa forme me imprima el texto con algo agregado en medio. Hasta el momento ...
RicharlyxD's user avatar
1 voto
1 respuesta
191 vistas

obtener documento dentro de codigo html

estoy intentando obtener las url de los anuncios que aparecen en las búsquedas que se realizan en esta url 'https://www.internetcorkboard.com/ar?q=brain+stem+injuries' from selenium import webdriver ...
montessillo's user avatar
1 voto
0 respuestas
65 vistas

Numero de registros webscrapping con Beautiful Soup

Realizando pruebas webscrapping con Beautiful Soup a Stack overflow mediante beautiful soup para obtener el titulo de cada pregunta, el resultado siempre me trae unos 12 o 13 registros. Inspeccionando ...
MoisesT's user avatar
  • 63
1 voto
0 respuestas
24 vistas

Beautifulsoap loop

Estoy tratando de seleccionar una serie de elementos dentro de una pagina web. En realidad 6. Utilizando este código consigo los elementos que quiero pero también muchos elementos que no quiero, ...
Carlos Ruz's user avatar
1 voto
1 respuesta
392 vistas

Obtener texto de un tag que está tras otro tag

Buenas a todos. Me surge una duda a la hora de parsear un documento html. A la hora de parsear, yo estoy haciendo lo siguiente. browser.get(url+ad) wait = WebDriverWait(browser, 10) html_source= ...
puppet's user avatar
  • 269
1 voto
1 respuesta
623 vistas

¿Cómo puedo obtener una pagina totalmente cargada con requests o urllib?

Estoy empezando en esto del web scraping y estoy intentando descargar todas las imágenes de un post de imgur, hay más de 1500 pero sólo me descarga las primeras 15, eso es porque la página va cargando ...
Samel Fagel's user avatar
0 votos
0 respuestas
45 vistas

Problemas con realizar un Web-Scrapping "AttributeError: 'NoneType'"

Tengo el siguiente problema al momento de realizar un webscraping a la pagina de shein. En general el problema es de atributos y en relación con - AttributeError: 'NoneType' object has no attribute '...
Alexis Rodas's user avatar
0 votos
0 respuestas
32 vistas

Cuando entro a una web con usuario y contraseña para hacer scraping, me da la información como si no estuviese logueado

Quiero consultar unos datos que aparecen diferentes si estás logueado o no. En mi caso cuando me logueo en la web con usuario y contraseña accedo sin ningún problema, a continuación extraigo todas las ...
jalapaar's user avatar
0 votos
0 respuestas
22 vistas

Error al copiar una pagina web (web scraping), no obtengo las imagenes

La pagina que estoy intentando hacer web scraping es www.classcentral.com/ con profundidad 1, me genera estos problemas: No obtengo las imagenes y por alguna razon salen pixeladas (como si no ...
Julian CP's user avatar
0 votos
0 respuestas
41 vistas

No logro crear el código correcto para contar

<span aria-hidden="true" class="b6dc9a9e69 adc357e4f1 fe621d6382"> <svg xmlns="http://www.w3.org/2000/svg" viewBox="0 0 24 24"> <path d="M24 ...
Fernando Vasconez Rodriguez's user avatar
0 votos
0 respuestas
35 vistas

No me deja usar web scraping para una pagina web/Does not let me use web scraping for a website

from bs4 import BeautifulSoup import requests import csv from datetime import datetime import pandas as pd from bs4 import BeautifulSoup from lxml import html page = requests.get('https://...
Cristian Camilo's user avatar
0 votos
0 respuestas
35 vistas

¿Cómo puedo obtener números de teléfono de una página de Google Maps?

Quiero raspar el número de teléfono de los resultados de google maps: https://www.google.com/maps/place/EDF+Cap+Amp%C3%A8re/@48.9204621,2.3433823,17z/data=!4m6!3m5!1s0x47e66ec170a20129:...
Revolucion for Monica's user avatar
0 votos
0 respuestas
29 vistas

Como Obtener Mas De Un Resultado Con WebScrapping Python

Pues estoy intentando conseguir todos los resultados con el web scrapping, pero, al parecer solo me obtiene el primer dato, es decir, estoy intentando conseguir una lista de todas las casas y solo me ...
Hercules's user avatar
0 votos
0 respuestas
50 vistas

¿Cómo obtener el hipervínculo deseado en requests?

Estoy intentando obtener el hipervínculo de imágenes específicas de BeautifulSoup y requests, con el siguiente código: import requests from bs4 import BeautifulSoup pg=requests.post("https://...
Abraham García's user avatar
0 votos
0 respuestas
37 vistas

Extraer datos con BeautifulSoup de una web que se carga al desplazar

Hay webs como https://es.bidoo.com/closed_auctions.php que van cargando los datos conforme vas bajando en la web. El problema está en que cuando intento extraer los datos con soup.find_all('div', ...
Gap Investor's user avatar
0 votos
0 respuestas
51 vistas

Web Scraping con Python

Estoy tratando de hacer un scraping de tablas de una pagina y despues de la quinta fila empieza a arrojar NaN, lo hice en Pandas porque despues quiero usar esa informacion en excel, y en Beautiful ...
Luis Desde Canada's user avatar
0 votos
0 respuestas
55 vistas

Web scrapping con Bs4 -> TypeError: 'NoneType' object is not subscriptable

Estoy desarrollando un proyecto de web scraping con BeautifulSoup y Requests en Django, extrayendo datos de páginas web que me mostrarán ciertos productos, su imagen, precio, etc. Al momento que ...
Milo.7725's user avatar
0 votos
0 respuestas
29 vistas

Hago un scrape a IMDb y no consigo sacar la información que quiero

quiero hacer, una api para aprender un poco sobre beautifulsoup4 y flask, que trata de directamente hacer un scraping de la pagina IMDb, como un ejemplo, y convertirlo en un resultado JSON para poder ...
Canal PC's user avatar
  • 100
0 votos
0 respuestas
80 vistas

Como obtener el elemento seleccionado de un combobox usando request, beautifulsoup y python?

Estoy tratando de hacerle scrapping a una web, pude obtener los datos de los textbox pero tengo problema para sacar la informacion de los menus desplegables. Este es el codigo del menu desplegable: &...
user306238's user avatar
0 votos
1 respuesta
87 vistas

agregar datos a un registro de una lista de python

tengo una lista de con los partidos de futbol que se van a disputar los próximos días Me gustaría añadir una columna más con datos estadísticos según la liga a la que pertenece cada partido, pero ...
ajmd97's user avatar
  • 21
0 votos
1 respuesta
47 vistas

no me funciona el scraping

No se porque no me funcionan el scraping de esta pagina, use el método del xpath donde al inspeccionar la pagina me salen los datos que necesito en forma correcta pero al ejecutarlo en python no se ...
carlosing's user avatar
0 votos
0 respuestas
41 vistas

Scrapear una lista sin etiqueta de wikipedia con BeautifulSoup

url = 'https://es.wikipedia.org/wiki/10_de_julio' pagina_nac = requests.get(url, headers=header) nacimientos_ = BeautifulSoup(pagina_nac.text, 'html.parser') No puedo acceder al contenedor de los ...
Marco's user avatar
  • 1
0 votos
0 respuestas
106 vistas

Extraer texto entre etiqueta <br>

El problema al que me enfrento es que usualmente extraigo texto con getText(), sin embargo, en esta ocasión el texto se encuentra entre etiquetas <br> y no sé cómo extraerlo. Con esa línea de ...
Barbara's user avatar
0 votos
0 respuestas
46 vistas

Beautifulsoup cerrar conexión

Estoy tratando de conectarme con Tiktok a través de Beautifulsoup pero la conexión se queda abierta continuamente y no consigo descargar la web. He probado a añadir un timeout, que evidentemente ...
Roberto Gimenez's user avatar
0 votos
1 respuesta
45 vistas

Error al parsear respuesta html

estoy haciendo una consulta a esta página web: https://es.soccerway.com/a/block_competitions_index_club_domestic?block_id=page_competitions_1_block_competitions_index_club_domestic_4&...
Inakima's user avatar
0 votos
1 respuesta
54 vistas

como obtener un link de una tabla raspada con beautifulsoup que coincida con un DF filtrado

Estoy realizando un raspado a una tabla. Esta tabla tiene varias filas las cuales contienen varias etiquetas estas etiquetas las obtengo con rows2 = rows[1].find('a') dentro de esta etiqueta capturo ...
Daxtrox's user avatar
  • 403
0 votos
1 respuesta
215 vistas

web scraping sismos, envío de mensajes bot telegram si se cumple condición, beautifulsoup

alguien me puede ayudar con mi código, es un bot de telegram el cuál envía mensajes de de un scraping a una web de sismos, me muestra el último sismo registrado cada 5 minutos, lo que necesito es que ...
Daxtrox's user avatar
  • 403
0 votos
0 respuestas
28 vistas

Quisiera poner el .text del print directamente en la búsqueda de las etiquetas

Hola quisiera saber si podría hacer el .text directamente en la variable sin tener que hacerlo en el print, como por ejemplo price = child_soup.find('h3',class_ = 'font-medium text-midnight text-3xl ...
Heryck Gerardo Romero Goliz's user avatar
0 votos
1 respuesta
58 vistas

¿Cómo se obtiene el texto de un enlace desde un div identificable por su nombre de clase?

Quiero anadir la informacion de cuantos Quotes de un articulo habia en el mio scraper que recupera los articulos que se recuperan a partir de una consulta en Google Scholar. Por ejemplo "nlp ...
Revolucion for Monica's user avatar
0 votos
1 respuesta
201 vistas

Como extraer datos de un grafico dinamico

He estado interesado en data science y con esto de las criptos. Se me hizo interesante tratar de extraer datos y de coinmarketcap. Sin embargo no logro encontrar en que parte de la pagina se almacenan ...
Morningstar's user avatar
0 votos
1 respuesta
18 vistas

Estoy intentado programar un web scraper y no estoy obteniendo el Output que busco

Intenté programar un web scraper para que buscara en una página de publicaciones científicas y me devolviera los títulos relacionados con un tema en específico. Mi código es el siguiente: from bs4 ...
jyanik's user avatar
  • 1
0 votos
1 respuesta
37 vistas

Web Scraping - Does not show results

Saben porque me trae 0 data cuando llamo de la siguiente forma import requests from bs4 import BeautifulSoup baseurl = 'https://inkafarma.pe/' headers = { 'User-Agent' : 'Mozilla/5.0 (Windows NT ...
JimmyRCJ's user avatar
0 votos
1 respuesta
528 vistas

Como borrar líneas en blanco -BeautifulSoup

Tengo el siguiente código que me permite leer una página web que yo elija, el problema son los espacios en blanco que hay, he intentado eliminarlos con strip() o con alguna expresión regular pero no ...
Lee Sin's user avatar