Lamentablemente **no es posible**.

Los `alert`, `prompt` y `confirm` son creados por el navegador y sus estilos visuales dependen enteramente de éste.

Ejemplo de Navegadores:

### Chrome

[![Chrome][1]][1]

### Edge

[![Edge][2]][2]

### Firefox

[![Firefox][3]][3]

### Internet Explorer

[![Internet Explorer][4]][4]

No forman parte del DOM y por lo tanto no se les puede aplicar estilos ni por CSS ni por JavaScript.

Lo único que puedes hacer es precisamente lo que mencionas que no querías: **Utilizar un modal de alguna librería de tu preferencia o hacer el código tú mismo**.


  [1]: https://i.sstatic.net/Aog4e.png
  [2]: https://i.sstatic.net/hJvm4.png
  [3]: https://i.sstatic.net/K1FyJ.png
  [4]: https://i.sstatic.net/mRF76.png