Preguntas con la etiqueta [scraping]

Web Scraping consiste en navegar automáticamente una web y extraer de ella información. También se puede utilizar para rellenar formularios, crear cuentas falsas o realizar cualquier acción en la red de forma automática.

Filtrar por
Ordenado por
Etiquetadas con
0 votos
0 respuestas
10 vistas

DUDA CON SELENIUM V4 EN PYTHON :(

He intentado ya de muchas formas y no puedo hacer que me funcione el siguiente código me aparecen errores como StaleElementReferenceException y no entiendo por qué si se supone con la espera explicita ...
Brian RG's user avatar
0 votos
0 respuestas
15 vistas

List index out of range al hacer scraping

Estoy intentado realizar un scraping en la página de wikipedia para sacar de una tabla la información sobre los juegos olímpicos. El tema que en una parte me sale error en el index y no estoy pudiendo ...
Gonzalo's user avatar
0 votos
0 respuestas
7 vistas

Problema al localizar elementos de pagina que se cargan dinámicamente utilizando Selenium

estoy intentando scrapear la página https://magiceden.io/ordinals/marketplace/bitmap. Estoy trabajando con Selenium en python. Necesito obtener los elementos (#.bitmap) que van apareciendo al ...
Fer Canciani's user avatar
0 votos
0 respuestas
26 vistas

Obtener datos de posicionamiento de un mapa web

Existe esta página que contiene en tiempo real la ubicación de líneas de buses: https://www.montevideo.gub.uy/buses/mapaBuses.html He consultado y al día de hoy no proporcionan una api que permita ...
Mauro's user avatar
  • 1
1 voto
0 respuestas
41 vistas

Scraping en ids variables

Hola buenas me encuentro realizando scraping con python en la siguiente pagina web https://stresse.ru/. A la hora de intentar hacer click en el boton de Send Layer 4 Attack con la siguiente orden: ...
Anthonyx82's user avatar
0 votos
0 respuestas
26 vistas

Error en api-key javascript

Tengo un caso error de api-key, mi api-key tiene mayúsculas y minúsculas, en javascript no progresa mi ejecución, debido al error que muestra en api-key, por favor alguien sabe como resolver? "x-...
Meto's user avatar
  • 1
0 votos
0 respuestas
29 vistas

Python scraping - problemas con CSS_SELECTOR

Tengo problemas para obtener la segunda tabla para la fecha 08/01/2010. Ya tengo la primera tabla con el siguiente código. (Cambiando a la fecha que les indico ni bien se abre la pagina web). import ...
Edu2694's user avatar
0 votos
1 respuesta
38 vistas

Cómo analizar un endpoint usando JSON para obtener datos de la página de Wunderground

Estoy tratando de obtener uno datos de la pagina Wunderground "https://www.wunderground.com/dashboard/pws/KNYNEWYO1614/table/2023-04-30/2023-04-30/daily" Pero cuando leo el HTML mis tablas ...
Jose Vasquez's user avatar
0 votos
0 respuestas
25 vistas

Python+ Selenium Error al abrir multiples ventanas

estoy haciendo un pequeño scrapping a la página de mismarcadores, pero tengo conocimiento básico en Selenium. En la iteración de elementos, cada elemento abre una nueva ventana, extrae los datos y ...
 Cristhian Castro's user avatar
0 votos
0 respuestas
22 vistas

Scraping- Acceso a datos economicos en Investing

Mediante un codigo VBA en Excel que he encontrado por internet, he conseguido descargar los datos historicos deL activo de la pagina "https://es.investing.com/indices/stoxx-600-banks-pr-...
José Miguel's user avatar
1 voto
0 respuestas
51 vistas

Conseguir el url de un "botón" definido como <i> con un evento de click

Estoy desarrollando un pequeño script para facilitarme el navegar por una página. Sin embargo, me topé con un problema al querer conseguir un link. Mi conocimiento en webdevelop es bastante limitado, ...
IJCS's user avatar
  • 33
0 votos
0 respuestas
30 vistas

Capturar precios de 2000 url distintas de patron desestructurado html web scraping

El problema es extraer del producto principal el precio en alrededor 2000 url de distintos sitios web y el patrón de html en general no existe para lo que necesito, en las imágenes compartidas se ve ...
Pablo Daniel Guzman's user avatar
0 votos
1 respuesta
23 vistas

Error al utilizar Scrapy para extraer info de Stack Overflow: ERROR: Error download <GET https://stackoverflow.com/questions/>

Estoy aprendiendo a utilizar Scrapy, pero hasta ahora no he podido realizar ninguna operación puesto que al momento de correrlo en la terminal, me arroja el mismo error sin importar qué cambios ...
DGT2038's user avatar
  • 15
0 votos
0 respuestas
163 vistas

SSL: CERTIFICATE_VERIFY_FAILED con Python Requests

Hace unos días mi scirpt para hacer requests a un sitio web funcionaba correctamente. Ahora me devuelve el siguiente error: SSLCertVerificationError Traceback (most recent call last) /...
diego medina's user avatar
0 votos
0 respuestas
23 vistas

Scrap de precios devuelve un precio que no se ve en pantalla

Estoy intentando scrapear precios de una pagina donde se dan tres situaciones: Productos con descuento (se ven 2 precios en la página) https://www.carrefour.com.ar/cebolla-x-kg/p Productos que tienen ...
Rocio Bisang's user avatar
0 votos
0 respuestas
85 vistas

Obtener un xpath de una busqueda de texto en una tabla

Soy nuevo en python, estoy haciendo scraping con selenium. Consigo llegar a una tabla en donde necesito descargar un pdf, pero solo de la fila que dice "FActura" La palabra la busco y la ...
Matias Alarcon's user avatar
0 votos
1 respuesta
63 vistas

¿Que recurso puedo utilizar para convertir una planilla de cálculo de google a un formato json?

Muy buenos días estimados!! Estoy con un desafío en el cuál tengo un archivo con formato de planilla de cálculos de google y para poder manipular y/o usar estos datos en Javascript al menos me ...
Pablo Daniel Guzman's user avatar
3 votos
1 respuesta
28 vistas

Extraer valores de una lista con BeautifulSoup

Estoy usando BeautifulSoup para extraer valores de una lista desordenada pero no soy capaz. Estos son los pasos que hago: 1- Hago un findall a la web buscando los elementos ul con clase "cols&...
Claytor's user avatar
  • 33
1 voto
0 respuestas
33 vistas

Scraping con Excel VBA

Quiero obtener información de web y procesarla en Excel. Utilizo VBA para ello. El código que uso es: ... Range("B4")=doc.getElementsByClassName("exchange__header-data-price")(0)....
incruspido's user avatar
0 votos
1 respuesta
31 vistas

el codigo no me crea el excel

import requests import xlsxwriter from bs4 import BeautifulSoup from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.common.keys ...
David Ruiz's user avatar
0 votos
0 respuestas
29 vistas

repeticion de datos en webscraping usando xpath

tengo un problema estoy intentado scrapear datos de una pagina y al buscar tal dato, este se repite muchas veces y nose por donde va el problema Aqui les dejo el codigo $x('//div[@class="cs"]...
Benjamin Correa's user avatar
0 votos
0 respuestas
37 vistas

No me deja usar web scraping para una pagina web/Does not let me use web scraping for a website

from bs4 import BeautifulSoup import requests import csv from datetime import datetime import pandas as pd from bs4 import BeautifulSoup from lxml import html page = requests.get('https://...
Cristian Camilo's user avatar
0 votos
1 respuesta
44 vistas

Al hacer web scraping me salen solo unos pocos items habiendo muchos más

Al hacer scraping con puppeteer y cheerio a una web me saca todos los items pero pero la mayoria están vacios y las imagenes me pone undefined excepto unos pocos que los saca bien como se ve en la ...
josiland's user avatar
0 votos
0 respuestas
27 vistas

Error en scraping a una pagina web "Node is either not clickable or not an HTMLElement"

Hice este scraping de un e-commerce, me devuelve los producto bien hasta que en un punto se rompe. No se como solucionarlo, nunca he logrado que me devuelva todos los productos bien. Usa puppeteer, ...
Santiago Ruberto's user avatar
0 votos
0 respuestas
23 vistas

Scraping / scraper no devuelve la imagen

Estoy tratando de de hacer un scraper de los celulares de MercadoLibre Uso Javascript y ahora estoy probando con Playground, pero la solucion me sirve tambien si me la dan en cheerio o puppeteer, ...
Santiago Ruberto's user avatar
0 votos
0 respuestas
36 vistas

Error 404 al hacer scraping

estoy realizando un scraping web con python y selenium, la página web abre con normalidad si la busco en el navegador, pero cuando lo hago desde el script me arroja error 404 from selenium import ...
Jhon Mondragon's user avatar
0 votos
0 respuestas
33 vistas

Scraping con Python

¡Buenas tardes! Necesito obtener los datos de una tabla de peajes en Argentina. La web donde esta esa información es la siguiente: https://www.argentina.gob.ar/obras-publicas/vialidad-nacional/...
Leandro Abraham's user avatar
0 votos
0 respuestas
62 vistas

¿Como seguir links con web scraping?

Estoy tratando de obtener los scripts de películas del género de terro de la siguiente página: https://imsdb.com/genre/Horror. El problema es que para llegar al script de la película hay que hacer 2 ...
Zarcklet's user avatar
0 votos
0 respuestas
32 vistas

Web Scraping Paginacion PHP JavaScript

Tengo un problema: Tengo una aplicación de Web Scraping con PHP/Goutte en el que manejo un formulario, ocupo una paginación mediante la cual pueda filtrar los resultados extrayendo primero los 10 más ...
Gustavo Reyes's user avatar
0 votos
1 respuesta
40 vistas

Python ¿como quitar espacios en blanco de un numero?

Al hacer un scrap recibo esta informacion. ('CAMISETA BLANCO BLANCO', '16806474', '1 124.46', 'M')< al hacer la insercción en la basde de datos, el "1 124.46" es un dato erroneo por ...
Dani Chacon Rey's user avatar
1 voto
1 respuesta
188 vistas

No puedo Extraer Datos ocultos de una web con BeautifulSoup y python

estoy intentando entender el código de la página https://foresignal.com/es/ y al momento de extraer los datos del HTML, hay datos que no me aparecen en el HTML pero cuando uso el navegador si, al ...
Jose Nieves's user avatar
0 votos
0 respuestas
21 vistas

Screpear con rvest

Error in open.connection(x, "rb") : schannel: next InitializeSecurityContext failed: SEC_E_ILLEGAL_MESSAGE (0x80090326) - This error usually occurs when a fatal SSL/TLS alert is received (e....
Lu Puppato's user avatar
0 votos
0 respuestas
57 vistas

Cómo realizar llamada a API para no recibir por respuesta 401 o´ 403 (errores)

Buenas tardes a tod@s. Estoy intentanto recibir respuesta json de la siguiente dirección (https://www.vinted.es/api/v2/promoted_closets?closet_count=1&item_count=5&exclude_member_ids=&...
AEK22's user avatar
  • 1
0 votos
0 respuestas
37 vistas

Extraer datos con BeautifulSoup de una web que se carga al desplazar

Hay webs como https://es.bidoo.com/closed_auctions.php que van cargando los datos conforme vas bajando en la web. El problema está en que cuando intento extraer los datos con soup.find_all('div', ...
Gap Investor's user avatar
1 voto
1 respuesta
66 vistas

Obtener valores con scraping

Holis, les comento que tengo que traer los datos de pizarra de la bolsa y no puedo obtener los valores de la pizarra y me da este error: Fatal error: Uncaught TypeError: curl_getinfo(): Argument #2 ($...
Antonia Herrera's user avatar
0 votos
0 respuestas
52 vistas

Web Scraping con Python

Estoy tratando de hacer un scraping de tablas de una pagina y despues de la quinta fila empieza a arrojar NaN, lo hice en Pandas porque despues quiero usar esa informacion en excel, y en Beautiful ...
Luis Desde Canada's user avatar
0 votos
0 respuestas
21 vistas

como pegar archivo Json escrapeado en otro JavaScript para poderlo manipularlo directamente?

tengo esta función para escrapear una tabla, esto me crea un archivo Json que me es actualizado cada cierto tiempo, y tengo la otra parte del código que me lo lee y lo convierte en objeto, pero quiero ...
carlosing's user avatar
1 voto
0 respuestas
75 vistas

Hacer click en input image con vba webscraping

estoy intentando hacer web scraping con vba. El problema es que no logro hacer 'click' en el boton consultar, da error, aparentemente puedo acceder al input que contiene la imagen 'consultar'. Lo que ...
alejandro101's user avatar
0 votos
0 respuestas
211 vistas

como puedo leer correo gmail con nodejs?

hola a todos Tengo un desafio en mi trabajo el cual me pidieron hacer un scraping a un gmail al que llegan los formularios de contactos desde la web de la empresa. Les presente una propuesta en python ...
Miguel Brown's user avatar
0 votos
0 respuestas
92 vistas

Como obtener el elemento seleccionado de un combobox usando request, beautifulsoup y python?

Estoy tratando de hacerle scrapping a una web, pude obtener los datos de los textbox pero tengo problema para sacar la informacion de los menus desplegables. Este es el codigo del menu desplegable: &...
user306238's user avatar
1 voto
1 respuesta
67 vistas

Twitter API failed [403] usando full archive search con API Academica (rTweet)

Estoy tratando de recuperar algunos tweets históricos con rTweet y estoy recibiendo un error muy poco detallado cuando utilizo la función search_fullarchive y search_30 days. Esto NO ocurre cuando se ...
Lucas Reydó's user avatar
0 votos
0 respuestas
95 vistas

PHP Obtener enlace de de página web (web scraping)

Hola estoy usando un host remoto y quiero obtener este enlace: https://mrzutv.net/fx27sep.m3u el cual se encuentra alojado en esta página web: https://mexiqueando.site/m3u-latina-septiembre-2022/, ...
Jack Bender's user avatar
4 votos
1 respuesta
72 vistas

C# Regex, no reconoce el patrón a pesar de ser correcto

Buenas estoy intentando hacer un programa para sacar información de un pdf, y cuando he dado el patrón regex que iba aplicar al texto, este no se comporta igual que las otras opciones que tengo para ...
mTx's user avatar
  • 94
1 voto
0 respuestas
48 vistas

for dentro de otro for siempre que muestra el último resultado

hola de nuevo amigos, bueno, sigo atascado con mi proyecto lo que quiero hacer es analizar una web de partidos de futbol, primero me tengo que conectar a la página donde aparece toda la lista de ...
ajmd97's user avatar
  • 21
0 votos
0 respuestas
89 vistas

scrapear varias subpaginas

creo que llevo bastante avanzado el 'for', pero sólo me imprime el último resultado, espero que sólo sea una tontería que se me está pasando por alto. import requests from bs4 import BeautifulSoup ...
ajmd97's user avatar
  • 21
0 votos
0 respuestas
73 vistas

crear csv despues de scrapear una web

me estoy iniciando en Scrapear webs, concretamente lo quiero scrapear son web de estadísticas de futbol para crear mi propia base de datos. Principalmente elijo esto porque quiero aprender a scrapear ...
ajmd97's user avatar
  • 21
0 votos
1 respuesta
85 vistas

Como coger la información del fútbol de ésta página?

estoy intentando coger la información de esta página [https://www.marca.com/futbol/primera-division/clasificacion.html] para dichos resultados y aunque por el mismo método extraigo información de ...
Jose's user avatar
  • 128
0 votos
0 respuestas
43 vistas

Selenium Python problema con pseudo elemento

Estoy realizando un proyecto en selenium, la idea es acceder a una web y descargar un archivo. Digamos que está pensando en 3 partes. 1ra parte está lista, el código permite entrar a la página, ...
nick_fh_cl's user avatar
0 votos
1 respuesta
47 vistas

no me funciona el scraping

No se porque no me funcionan el scraping de esta pagina, use el método del xpath donde al inspeccionar la pagina me salen los datos que necesito en forma correcta pero al ejecutarlo en python no se ...
carlosing's user avatar
0 votos
0 respuestas
40 vistas

Scrapping en R con html_nodes no funciona usando xpath ni css selector. Tampoco selenium

estoy intentando scrapear una página con R usando html_nodes. Necesito extraer el nombre y el precio, y con el nombre usando el css selector funciona perfecto, pero con el precio todo lo que pongo ...
Rocio Bisang's user avatar