Hola soy nuevo en esto de python y estoy intentando imprimir el contenido de etiquetas que encuentro dentro de una cierta pagina web.
Os voy a poner mi caso:
Estoy intentando hacer un programa que pueda ver que dominios estan siendo hosteados dentro de un server. Para esto estoy usando la pagina viewdns.info, la cual te dice que dominios estan hosteados en un server, por un reverse_ip.
Este es mi codigo
como podeis observar hago una peticion a la pagina, y el codigo lo meto en la variable b usando beautifulSoup, y dentro de este con la variable c buscamos la id "null", que es la que contiene los resultados. y despues buscamos "border=1" que esta dentro de la etiqueta null y tambien contiene los resultados.
el problema es que al iniciar el codigo nos da un fallo Nontype ,porque no encuentra la etiqueta, pero si existe ya que la vi dentro del codigo fuente de la pagina:
entonces lo que hice es imprimir b (Soup), ya que es el codigo que estoy analizando, y el codigo guardado en b (soup) no es el correspondiente al de la pagina que he indicado en consulta. si no uno diferente, por eso no se encuntra la etiqueta "null".
Sabeis porque no analiza el codigo de la pagina que yo especifico en consulta si no otro. Sabeis algun otro modo de hacerlo o veis algun fallo.
Muchas gracias.
Código:
import requests
from bs4 import BeautifulSoup
def main():
sitio="www.cloudflare.com"
agent= {"User-Agent":"Firefox"}
consulta= requests.get("https://viewdns.info/reverseip/?host={}&t=1".format(sitio),headers=agent)
b = BeautifulSoup(consulta.text,"html5lib")
c = b.find(id="null")
d =c.find(border="1")
for l in d.find_all("tr"):
print("Sitio encontrado: " + l.td.string)
if __name__ == '__main__':
try:
main()
except KeyboardInterrupt:
exit()