Si lo que deseas es contar la cantidad de group_id
deberás entonces usar la función de agrupación COUNT()
quedando tu consulta de este modo:
SELECT id, COUNT(group_id) AS Total
FROM group_memberships
JOIN groups ON groups.id = group_memberships.group_id
GROUP BY id;
Solo te muestra uno por:
Aunque estas agrupando por id, lo único que estas consiguiendo es que dicha agrupación solo tome el primer renglón de cada id
que encuentra y entonces al tomar solo esa fila solo te va a mostrar 1