Podrías seleccionar el Non-breaking SpaceNon-breaking Space a través de su valor unicodeUnicode en vez de a través de su HTML EntityHTML Entity.
$(function() {
$('div:contains("\u00a0")').remove();
});
<script src="https://cdnjs.cloudflare.com/ajax/libs/jquery/3.3.1/jquery.min.js"></script>
<div>texto</div>
<div> </div>
<div>texto</div>
JQuery goza del selector :contains
que nos permite seleccionar un elemento por su contenido textual. Aprovechándome de este y buscando el Non-breaking Space a través de su valor Unicode, puedes seleccionar los <div>
que lo contenga para posteriormente borrarlos o hacer con ellos los que necesites.