Si lo que deseas es contar la cantidad de `group_id` deberás entonces usar la función de agrupación `COUNT()` quedando tu consulta de este modo:

    SELECT id, COUNT(group_id) AS Total
    FROM group_memberships
    JOIN groups ON groups.id = group_memberships.group_id
    GROUP BY id;

Solo te muestra uno por:

Aunque estas agrupando por id, lo único que estas consiguiendo es que dicha agrupación solo tome el primer renglón de cada `id` que encuentra y entonces al tomar solo esa fila solo te va a mostrar 1