estoy intentando comenzar con algo de web scraping pero estoy teniendo un problema con un sitio donde no entiendo bien si trabajando con requests deberia hacer un get o un post y en caso de deber hacer uno en particular (Creo que probablemente haya que hacer los 2), no estaria encontrando exactamente de donde sacar los parametros que son necesarios: Pagina Web que estoy utilizando: https://steam.tools/itemvalue/ Pero entiendo que si entras de la siguiente manera, el juego y el nombre de usuario ya se ponen por defecto (Siempre intento entrar al mismo juego y a mi usuario, no necesitaria que estos cambien) https://steam.tools/itemvalue/#/Usuario-CodJuego Donde tendriamos por ejemplo: https://steam.tools/itemvalue/#/St4ck-570 (La persona utilizada en el ejemplo es alguien conocido de la comunidad) Ahora Cuando se presiona el boton Fetch se realizan varios metodos o llamadas pero no se identificar que necesito hacer si es que si quiera se puede... En la imagen podemos ver como seria el resultado (Pueden probarlo con el url ustedes mismos) Lo que intente en principio fue esto pero como dije necesitaria ayuda para saber de que cookie o de donde sale el otro parámetro, y si el captcha no es una cookie, si siquiera se puede obtener, ya que si entras a la pagina, la primera vez nunca solicita captcha, pero se necesita como parámetro entiendo. Esto es lo que intente, se que esta mal, devuelve algo que no es exactamente lo que quiero, cualquier ayuda al respecto se agradece, soy muy nuevo en esto en particular, pero tengo experiencia en programación (Estudiante actualmente de Ing. en sistemas), cualquier error que haya cometido al explicar también se agradece para poder ser mas claro con lo que quiero transmitir. Me di cuenta que no explique bien que es lo que quiero hacer pero es simplemente obtener los datos de los objetos en cuestión para hacer un 'analisis' por asi decirlo de como varian los precios de los objetos, cuanto suben, cuanto bajan, etc.
import requests
from bs4 import BeautifulSoup
with requests.Session() as c:
url = 'https://steam.tools/itemvalue/#/St4ck-570'
dataPost = {'i':1,'id':'St4ck', 'app':570}
response = c.get(url, data=dataPost)
print(response.text)