A mi Este enlace me lo aclaro bastante. Pero esta en inglés. (aunque solo viendo los diagramas es bastante explicativo.
Con new crea un Objeto, y desde la variable hace referencia al objeto creado.
Sring s = new String("Hola");
Por otra parte solo con comillas es un tipo primitivo (es como int o Integer y boolean o Boolean)
String s = "hola";
String s2 = "hola2";
s y s2 si haces equals o "==" son iguales pues su contenido es el mismo.
Si por el contrario usas el objeto String.
String s = new String("hola")
String s2 = new String("hola")
Ambos objetos no serán iguales, pues la comparación la hace entre objetos, y cada objeto tendrá su id (creo que con .equals() si te reconocería como iguales por el comparator que tiene, pero con "==" no)