Te dejo una serie de pasos a seguir para crear tu certificado autofirmado.
cd C:\xampp\apache\bin
Estando en este directorio ejecutamos los siguientes comandos para crear el certificado.
Generar clave privada
openssl genrsa -out C:\xampp\apache\conf\ssl.key\local.key 4096
Generar csr
openssl req -new -sha256 -out C:\xampp\apache\conf\ssl.csr\local.csr -key C:\xampp\apache\conf\ssl.key\local.key -config C:\xampp\apache\conf\openssl.cnf
Crear certificado, crt
openssl x509 -req -sha256 -days 3650 -in C:\xampp\apache\conf\ssl.csr\local.csr -signkey C:\xampp\apache\conf\ssl.key\local.key -out C:\xampp\apache\conf\ssl.crt\local.crt -extensions req_ext -extfile C:\xampp\apache\conf\openssl.cnf
Aquí como hacerlo también