Ya lo resolví con esta pregunta https://stackoverflow.com/questions/715650/how-to-clone-arraylist-and-also-clone-its-contents con la que tiene 208 votos la resolví era cuestión de implementar Cloneable en PalletTempModel y luego clonar todos los elementos.
Aquí el código resuelto --> https://github.com/Miguel546/recyclerviewET