El error se genera porque el temporizador no es una variable global y cuando sales de la app esta sigue ejecutandose, te dejo un ejemplo de como deberías de utilizarlo en el onBackPressed()

    public CountDownTimer miCronometro;
    @Override
    public void onBackPressed() {
        builder.setMessage("¿Quieres salir de la aplicación?")
                .setIcon(R.drawable.ic_balon)
                .setTitle("Abandonar partida")
                .setCancelable(false)
                .setPositiveButton("Salir", new DialogInterface.OnClickListener() {
                    @Override
                    public void onClick(DialogInterface dialog, int which) {
                        
                        miCronometro.cancel();
                        finish();
                    }
                })
                .setNegativeButton("No", new DialogInterface.OnClickListener() {
                    @Override
                    public void onClick(DialogInterface dialog, int which) {
                        dialog.cancel();
                    }
                });
        AlertDialog dialog = builder.create();
        dialog.show();
    }`