El problema es que por algún motivo Netbeans necesita que crees la carpeta resourcesresources y en esta carpeta crear los paquetes que contendrán tus imagenesimágenes o recursos.
Por, por lo que el primer paso para solucionar este problema sería crear la carpeta.
Entonces, para hacerlo, tienes que dirigirte al apartado FilesFiles en la barra de navegación, después tienes que desplegar las carpetas hasta llegar al mainmain, ahí tienes que crear la carpeta resourcesresources y pegar tus imagenesimágenes ahí.
Puedes simplemente añadirlas sobreponiendo las imagenesimágenes en el folder.
Una vez hecho esto tienes que volver al apartado proyectsproyects, en el cual se habrá añadido una carpeta llamada Other Sources,Other Sources: en esta tendrás que crear un Java package con el nombre que le quieres dar a ese apartado de recursos, en mi ejemplo le puse imagesimages.
Una vez creado el paquete imagesimages le añadí imagenesimágenes.
Puedes simplemente añadirlas sobreponiendo las imagenesimágenes en el paquete y soltandolassoltándolas.
Finalmente ahora sisí puedes añadir las imagenesimágenes que quieras a tus jLabels, solo asegurateasegúrate que se estén añadiendo del paquete que acabas de crear en Other resources.
Espero que mi respuesta los haya ayudado, si quieren alguna aclaración pueden dejar sus comentariosOther resources.