Estoy aprendiendo a utilizar el modulo bs4 de python para escrapear la web. Lo que estoy intentando hacer es obtener el puntaje de un videojuego en metacritic y buscando por internet y preguntas similares no he podido solucionarlo. Esto es lo que tengo, que lo que intenta hacer es escrapear el nombre del juego.
from bs4 import BeautifulSoup
import requests
url = "https://www.metacritic.com/game/pc/ghostrunner"
page = requests.get(url)
soup = BeautifulSoup(page.content, "html.parser")
nombre = soup.find_all('div', class_="product_title")
review = soup.find_all('div', class_="summary_wrap")
print(nombre)
print(review)
El output de este codigo es: [] [] Esto me ocurre cada vez que intento obtener cualquier cosa en la pagina. Alguna idea para solucionarlo? Gracias!
requests.get(url, headers={"User-Agent": "algo"})