Preguntas con la etiqueta [scraping]
Web Scraping consiste en navegar automáticamente una web y extraer de ella información. También se puede utilizar para rellenar formularios, crear cuentas falsas o realizar cualquier acción en la red de forma automática.
215
preguntas
0
votos
0
respuestas
10
vistas
DUDA CON SELENIUM V4 EN PYTHON :(
He intentado ya de muchas formas y no puedo hacer que me funcione el siguiente código me aparecen errores como StaleElementReferenceException y no entiendo por qué si se supone con la espera explicita ...
0
votos
0
respuestas
15
vistas
List index out of range al hacer scraping
Estoy intentado realizar un scraping en la página de wikipedia para sacar de una tabla la información sobre los juegos olímpicos.
El tema que en una parte me sale error en el index y no estoy pudiendo ...
0
votos
0
respuestas
7
vistas
Problema al localizar elementos de pagina que se cargan dinámicamente utilizando Selenium
estoy intentando scrapear la página https://magiceden.io/ordinals/marketplace/bitmap.
Estoy trabajando con Selenium en python.
Necesito obtener los elementos (#.bitmap) que van apareciendo al ...
0
votos
0
respuestas
26
vistas
Obtener datos de posicionamiento de un mapa web
Existe esta página que contiene en tiempo real la ubicación de líneas de buses:
https://www.montevideo.gub.uy/buses/mapaBuses.html
He consultado y al día de hoy no proporcionan una api que permita ...
1
voto
0
respuestas
41
vistas
Scraping en ids variables
Hola buenas me encuentro realizando scraping con python en la siguiente pagina web https://stresse.ru/.
A la hora de intentar hacer click en el boton de Send Layer 4 Attack con la siguiente orden:
...
0
votos
0
respuestas
26
vistas
Error en api-key javascript
Tengo un caso error de api-key, mi api-key tiene mayúsculas y minúsculas, en javascript no progresa mi ejecución, debido al error que muestra en api-key, por favor alguien sabe como resolver?
"x-...
0
votos
0
respuestas
29
vistas
Python scraping - problemas con CSS_SELECTOR
Tengo problemas para obtener la segunda tabla para la fecha 08/01/2010. Ya tengo la primera tabla con el siguiente código. (Cambiando a la fecha que les indico ni bien se abre la pagina web).
import ...
0
votos
1
respuesta
38
vistas
Cómo analizar un endpoint usando JSON para obtener datos de la página de Wunderground
Estoy tratando de obtener uno datos de la pagina Wunderground "https://www.wunderground.com/dashboard/pws/KNYNEWYO1614/table/2023-04-30/2023-04-30/daily" Pero cuando leo el HTML mis tablas ...
0
votos
0
respuestas
25
vistas
Python+ Selenium Error al abrir multiples ventanas
estoy haciendo un pequeño scrapping a la página de mismarcadores, pero tengo conocimiento básico en Selenium. En la iteración de elementos, cada elemento abre una nueva ventana, extrae los datos y ...
0
votos
0
respuestas
22
vistas
Scraping- Acceso a datos economicos en Investing
Mediante un codigo VBA en Excel que he encontrado por internet, he conseguido descargar los datos historicos deL activo de la pagina "https://es.investing.com/indices/stoxx-600-banks-pr-...
1
voto
0
respuestas
51
vistas
Conseguir el url de un "botón" definido como <i> con un evento de click
Estoy desarrollando un pequeño script para facilitarme el navegar por una página. Sin embargo, me topé con un problema al querer conseguir un link. Mi conocimiento en webdevelop es bastante limitado, ...
0
votos
0
respuestas
30
vistas
Capturar precios de 2000 url distintas de patron desestructurado html web scraping
El problema es extraer del producto principal el precio en alrededor 2000 url de distintos sitios web y el patrón de html en general no existe para lo que necesito, en las imágenes compartidas se ve ...
0
votos
1
respuesta
23
vistas
Error al utilizar Scrapy para extraer info de Stack Overflow: ERROR: Error download <GET https://stackoverflow.com/questions/>
Estoy aprendiendo a utilizar Scrapy, pero hasta ahora no he podido realizar ninguna operación puesto que al momento de correrlo en la terminal, me arroja el mismo error sin importar qué cambios ...
0
votos
0
respuestas
163
vistas
SSL: CERTIFICATE_VERIFY_FAILED con Python Requests
Hace unos días mi scirpt para hacer requests a un sitio web funcionaba correctamente. Ahora me devuelve el siguiente error:
SSLCertVerificationError Traceback (most recent call last)
/...
0
votos
0
respuestas
23
vistas
Scrap de precios devuelve un precio que no se ve en pantalla
Estoy intentando scrapear precios de una pagina donde se dan tres situaciones:
Productos con descuento (se ven 2 precios en la página) https://www.carrefour.com.ar/cebolla-x-kg/p
Productos que tienen ...
0
votos
0
respuestas
85
vistas
Obtener un xpath de una busqueda de texto en una tabla
Soy nuevo en python, estoy haciendo scraping con selenium.
Consigo llegar a una tabla en donde necesito descargar un pdf, pero solo de la fila que dice "FActura"
La palabra la busco y la ...
0
votos
1
respuesta
63
vistas
¿Que recurso puedo utilizar para convertir una planilla de cálculo de google a un formato json?
Muy buenos días estimados!!
Estoy con un desafío en el cuál tengo un archivo con formato de planilla de cálculos de google y para poder manipular y/o usar estos datos en Javascript al menos me ...
3
votos
1
respuesta
28
vistas
Extraer valores de una lista con BeautifulSoup
Estoy usando BeautifulSoup para extraer valores de una lista desordenada pero no soy capaz. Estos son los pasos que hago:
1- Hago un findall a la web buscando los elementos ul con clase "cols&...
1
voto
0
respuestas
33
vistas
Scraping con Excel VBA
Quiero obtener información de web y procesarla en Excel. Utilizo VBA para ello.
El código que uso es:
...
Range("B4")=doc.getElementsByClassName("exchange__header-data-price")(0)....
0
votos
1
respuesta
31
vistas
el codigo no me crea el excel
import requests
import xlsxwriter
from bs4 import BeautifulSoup
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys ...
0
votos
0
respuestas
29
vistas
repeticion de datos en webscraping usando xpath
tengo un problema estoy intentado scrapear datos de una pagina y al buscar tal dato, este se repite muchas veces y nose por donde va el problema
Aqui les dejo el codigo
$x('//div[@class="cs"]...
0
votos
0
respuestas
37
vistas
No me deja usar web scraping para una pagina web/Does not let me use web scraping for a website
from bs4 import BeautifulSoup
import requests
import csv
from datetime import datetime
import pandas as pd
from bs4 import BeautifulSoup
from lxml import html
page = requests.get('https://...
0
votos
1
respuesta
44
vistas
Al hacer web scraping me salen solo unos pocos items habiendo muchos más
Al hacer scraping con puppeteer y cheerio a una web me saca todos los items pero pero la mayoria están vacios y las imagenes me pone undefined excepto unos pocos que los saca bien como se ve en la ...
0
votos
0
respuestas
27
vistas
Error en scraping a una pagina web "Node is either not clickable or not an HTMLElement"
Hice este scraping de un e-commerce, me devuelve los producto bien hasta que en un punto se rompe.
No se como solucionarlo, nunca he logrado que me devuelva todos los productos bien.
Usa puppeteer, ...
0
votos
0
respuestas
23
vistas
Scraping / scraper no devuelve la imagen
Estoy tratando de de hacer un scraper de los celulares de MercadoLibre
Uso Javascript y ahora estoy probando con Playground, pero la solucion me sirve tambien si me la dan en cheerio o puppeteer, ...
0
votos
0
respuestas
36
vistas
Error 404 al hacer scraping
estoy realizando un scraping web con python y selenium, la página web abre con normalidad si la busco en el navegador, pero cuando lo hago desde el script me arroja error 404
from selenium import ...
0
votos
0
respuestas
33
vistas
Scraping con Python
¡Buenas tardes!
Necesito obtener los datos de una tabla de peajes en Argentina. La web donde esta esa información es la siguiente: https://www.argentina.gob.ar/obras-publicas/vialidad-nacional/...
0
votos
0
respuestas
62
vistas
¿Como seguir links con web scraping?
Estoy tratando de obtener los scripts de películas del género de terro de la siguiente página: https://imsdb.com/genre/Horror. El problema es que para llegar al script de la película hay que hacer 2 ...
0
votos
0
respuestas
32
vistas
Web Scraping Paginacion PHP JavaScript
Tengo un problema: Tengo una aplicación de Web Scraping con PHP/Goutte en el que manejo un formulario, ocupo una paginación mediante la cual pueda filtrar los resultados extrayendo primero los 10 más ...
0
votos
1
respuesta
40
vistas
Python ¿como quitar espacios en blanco de un numero?
Al hacer un scrap recibo esta informacion.
('CAMISETA BLANCO BLANCO', '16806474', '1 124.46', 'M')<
al hacer la insercción en la basde de datos, el "1 124.46" es un dato erroneo por ...
1
voto
1
respuesta
188
vistas
No puedo Extraer Datos ocultos de una web con BeautifulSoup y python
estoy intentando entender el código de la página https://foresignal.com/es/ y al momento de extraer los datos del HTML, hay datos que no me aparecen en el HTML pero cuando uso el navegador si, al ...
0
votos
0
respuestas
21
vistas
Screpear con rvest
Error in open.connection(x, "rb") :
schannel: next InitializeSecurityContext failed: SEC_E_ILLEGAL_MESSAGE (0x80090326) - This error usually occurs when a fatal SSL/TLS alert is received (e....
0
votos
0
respuestas
57
vistas
Cómo realizar llamada a API para no recibir por respuesta 401 o´ 403 (errores)
Buenas tardes a tod@s.
Estoy intentanto recibir respuesta json de la siguiente dirección (https://www.vinted.es/api/v2/promoted_closets?closet_count=1&item_count=5&exclude_member_ids=&...
0
votos
0
respuestas
37
vistas
Extraer datos con BeautifulSoup de una web que se carga al desplazar
Hay webs como https://es.bidoo.com/closed_auctions.php que van cargando los datos conforme vas bajando en la web.
El problema está en que cuando intento extraer los datos con soup.find_all('div', ...
1
voto
1
respuesta
66
vistas
Obtener valores con scraping
Holis, les comento que tengo que traer los datos de pizarra de la bolsa y no puedo obtener los valores de la pizarra y me da este error:
Fatal error: Uncaught TypeError: curl_getinfo(): Argument #2 ($...
0
votos
0
respuestas
52
vistas
Web Scraping con Python
Estoy tratando de hacer un scraping de tablas de una pagina y despues de la quinta fila empieza a arrojar NaN, lo hice en Pandas porque despues quiero usar esa informacion en excel, y en Beautiful ...
0
votos
0
respuestas
21
vistas
como pegar archivo Json escrapeado en otro JavaScript para poderlo manipularlo directamente?
tengo esta función para escrapear una tabla, esto me crea un archivo Json que me es actualizado cada cierto tiempo, y tengo la otra parte del código que me lo lee y lo convierte en objeto, pero quiero ...
1
voto
0
respuestas
75
vistas
Hacer click en input image con vba webscraping
estoy intentando hacer web scraping con vba. El problema es que no logro hacer 'click' en el boton consultar, da error, aparentemente puedo acceder al input que contiene la imagen 'consultar'. Lo que ...
0
votos
0
respuestas
211
vistas
como puedo leer correo gmail con nodejs?
hola a todos
Tengo un desafio en mi trabajo el cual me pidieron hacer un scraping a un gmail al que llegan los formularios de contactos desde la web de la empresa. Les presente una propuesta en python ...
0
votos
0
respuestas
92
vistas
Como obtener el elemento seleccionado de un combobox usando request, beautifulsoup y python?
Estoy tratando de hacerle scrapping a una web, pude obtener los datos de los textbox pero tengo problema para sacar la informacion de los menus desplegables.
Este es el codigo del menu desplegable:
&...
1
voto
1
respuesta
67
vistas
Twitter API failed [403] usando full archive search con API Academica (rTweet)
Estoy tratando de recuperar algunos tweets históricos con rTweet y estoy recibiendo un error muy poco detallado cuando utilizo la función search_fullarchive y search_30 days. Esto NO ocurre cuando se ...
0
votos
0
respuestas
95
vistas
PHP Obtener enlace de de página web (web scraping)
Hola estoy usando un host remoto y quiero obtener este enlace:
https://mrzutv.net/fx27sep.m3u
el cual se encuentra alojado en esta página web: https://mexiqueando.site/m3u-latina-septiembre-2022/, ...
4
votos
1
respuesta
72
vistas
C# Regex, no reconoce el patrón a pesar de ser correcto
Buenas estoy intentando hacer un programa para sacar información de un pdf, y cuando he dado el patrón regex que iba aplicar al texto, este no se comporta igual que las otras opciones que tengo para ...
1
voto
0
respuestas
48
vistas
for dentro de otro for siempre que muestra el último resultado
hola de nuevo amigos,
bueno, sigo atascado con mi proyecto
lo que quiero hacer es analizar una web de partidos de futbol, primero me tengo que conectar a la página donde aparece toda la lista de ...
0
votos
0
respuestas
89
vistas
scrapear varias subpaginas
creo que llevo bastante avanzado el 'for', pero sólo me imprime el último resultado, espero que sólo sea una tontería que se me está pasando por alto.
import requests
from bs4 import BeautifulSoup
...
0
votos
0
respuestas
73
vistas
crear csv despues de scrapear una web
me estoy iniciando en Scrapear webs, concretamente lo quiero scrapear son web de estadísticas de futbol para crear mi propia base de datos. Principalmente elijo esto porque quiero aprender a scrapear ...
0
votos
1
respuesta
85
vistas
Como coger la información del fútbol de ésta página?
estoy intentando coger la información de esta página
[https://www.marca.com/futbol/primera-division/clasificacion.html] para dichos resultados y aunque por el mismo método extraigo información de ...
0
votos
0
respuestas
43
vistas
Selenium Python problema con pseudo elemento
Estoy realizando un proyecto en selenium, la idea es acceder a una web y descargar un archivo. Digamos que está pensando en 3 partes.
1ra parte está lista, el código permite entrar a la página, ...
0
votos
1
respuesta
47
vistas
no me funciona el scraping
No se porque no me funcionan el scraping de esta pagina, use el método del xpath donde al inspeccionar la pagina me salen los datos que necesito en forma correcta pero al ejecutarlo en python no se ...
0
votos
0
respuestas
40
vistas
Scrapping en R con html_nodes no funciona usando xpath ni css selector. Tampoco selenium
estoy intentando scrapear una página con R usando html_nodes.
Necesito extraer el nombre y el precio, y con el nombre usando el css selector funciona perfecto, pero con el precio todo lo que pongo ...