Simplemente coloca doble barra \\
ya que la barra invertida en sí es un caracter que se utiliza para escapar otros caracteres especial.
Sería:
$var2 = '\\';
Puedes leer más sobre este caracter en la documentación oficial de php
Secuencias de escape
El carácter barra invertida tiene varios usos. El primero es que si está seguido de un carácter no alfanumérico, toma cualquier significado especial que el carácter pueda tener. Este uso de la barra invertida como carácter de escape se aplica tanto dentro como fuera de las clases carácter.
Un segundo uso de la barra invertida proporciona una manera de codificar caracteres no imprimibles en patrones de una forma visible. No hay restricciones en la aparición de los caracteres no imprimibles, excepto para el cero binario el cual finaliza el patrón.
El ejemplo más común de caracter no imprimible es el salto de línea \n
y la tabulación \t