No se pueden concatenar enteros a string sin antes castearlos. Para eso hacé

    str(s.count (x))

Para todas las vocales.

Quedaría: 

    s = "En un lugar de la Mancha"

    def contador_vocales (s):
    s = s.lower()
    vocales = 0
    for vocales in s:
        if "a" in s:
            vocales = vocales + str(s.count ("a"))
        elif "e" in s:
            vocales = vocales + str(s.count ("e"))
        elif "i" in s:
            vocales = vocales + str(s.count ("i"))
        elif "o" in s:
            vocales = vocales + str(s.count ("o"))
        elif "u" in s:
            vocales = vocales + str(s.count ("u"))
    return (vocales)

    contador_vocales (s)

Saludos!