Suponiendo que quieres hacer la siguiente consulta:
SELECT ciudad.*, count(personas.ciudad) as num_habitantes
FROM ciudad
INNER JOIN personas
ON personas.id_ciudad = ciudad.id
GROUP BY (personas.ciudad)
ORDER BY (personas.ciudad);
Django tiene funciones de Agregacion, en este caso necesitamos el Count, tu codigo quedaria de la siguiente forma:
from django.db.models import Count
ciudades_con_total_habitantes = Ciudad.objects.annotate(num_habitantes=Count('personas')).order_by('-num_habitantes')
Ahora bien quieres ver el top 5 de ciudades con mayor habitantes, previamente lo ordenamos de mayor a menor, solo queda cortar el resultado
ciudades_con_total_habitantes[:5]