2

estoy programando un bot para discord, y en un comando en específico se encarga de hacer scraping de acuerdo a la palabra que el usuario introduce junto con el comando !rankr (por ejemplo: !rankr jugador1). Hasta ahora todo funciona bien, el problema comienza cuando el usuario busca una palabra con un caracter especial como "Ø" por ejemplo. Cuando eso pasa, inmediatamente me lanza error de encoding porque el codigo ascii no puede interpretar dicho símbolo. Cómo puedo hacer para que mi comando interprete dichos símbolos y haga la busqueda correspondiente?

Éste es mi código actual:

@bot.command(name="rankr")
async def rankr(ctx, arg):
    #Diccionaro de simbologías:
    o = u'\xd8'
    
    html = urlopen('http://maplestory.nexon.net/rankings/world-ranking/reboot-(na)?pageIndex=1&character_name=' + arg)
    url = "http://maplestory.nexon.net/rankings/world-ranking/reboot-(na)?pageIndex=1&character_name=" + arg
    legionurl = "http://maplestory.nexon.net/rankings/legion/reboot-(na)?pageIndex=1&character_name=" + arg + "&search=true&region=#ranking"

Donde "arg" es la palabra escrita por el cliente junto con el comando.

Edit: Al hacer estos cambios me lanza otro error donde dice que el objeto de tipo 'int' no tiene len():

html = urlopen('http://maplestory.nexon.net/rankings/world-ranking/reboot-(na)?pageIndex=1&character_name=' + quote(entrada))
    url = "http://maplestory.nexon.net/rankings/world-ranking/reboot-(na)?pageIndex=1&character_name=" + quote(entrada)
    legionurl = "http://maplestory.nexon.net/rankings/legion/reboot-(na)?pageIndex=1&character_name=" + quote(entrada) + "&search=true&region=#ranking"

Gracias de antemano!

1
  • Recuerda poner un ejemplo mínimo y la traza completa del error en la pregunta. Como falla en la primer llamada a urlopen no creo que el código que sigue sea relevante para la pregunta.
    – braver
    Commented el 21 jul. 2020 a las 15:49

2 respuestas 2

3

Las urls que recibe urlopen deben ser convertibles a la codificación ASCII. Como "Ø" es un símbolo que no puede ser representado en esa codificación, urlopen tira una excepción UnicodeEncodeError al intentar convertirlo.

Para solucionarlo deberías escapar los símbolos conflictivos con urllib.parse.quote. Por ejemplo:

from urllib.parse import quote
from urllib.request import urlopen

entrada = "Ø"

response = urlopen("https://httpbin.org/get?q=" + quote(entrada))

print(response.getcode())
3
  • Lo que pasa es que no quiero evadir dichos símbolos, sino que literalmente me haga la búsqueda utilizandolos, la página donde se realiza la búsqueda si reconoce tales caracteres. Además, no todo el tiempo el usuario busca palabras con caracteres especiales. Commented el 21 jul. 2020 a las 16:08
  • Creo que debería funcionar igual, ya que el servidor lo que hace es el proceso contrario (para obtener los simbolos originales) y hacer la busqueda.
    – braver
    Commented el 21 jul. 2020 a las 16:11
  • Aun no comprendo del todo como emplearlo directamente en mi ejemplo, anexé lo que hice con lo que tu me pusiste al post principal. Gracias. Commented el 21 jul. 2020 a las 16:31
2

Al fin pude descifrar como hacerlo. Básicamente tuve que transformar a bytes la variable arg:

arg = bytes(arg,'utf-8')

y después cuando quiera usarla para un request, especificar que tiene que hacer un decode a 'utf-8':

url = "http://maplestory.nexon.net/rankings/world-ranking/reboot-(na)?pageIndex=1&character_name=" + arg.decode('utf-8')

De esta manera es que logré hacerlo, desconozco si sea la mejor forma pero en definitiva me funcionó.

Tu Respuesta

By clicking “Publica tu respuesta”, you agree to our terms of service and acknowledge you have read our privacy policy.

¿No es la respuesta que buscas? Examina otras preguntas con la etiqueta o formula tu propia pregunta.