Importante: lea los comentarios que se encuentran en el código. Allí se documenta lo que hace cada línea.
Esta es la razón
Lo que ocurre con:
Math.min.apply(null, numeros);
Es que devuelve el número más pequeño (tal y como lo has planteado) y no su índice. Entonces, para poder eliminar el número que está devolviendo debemos conocer primero su índice (valga la redundancia).
Entonces, esta es la forma en el que lo podemos averiguar:
numeros.indexOf( Math.min.apply(null, numeros) );
Una vez, que ya conocemos su índice podemos eliminarla del array, es decir:
// Nuestro array de números:
const numeros = [11,5,7,9,10,12];
// Obtenemos su índice:
let indice = numeros.indexOf( Math.min.apply(null, numeros));
// Eliminamos del array el número que se encuentra en
// el índice indicado, es decir, el 5:
numeros.splice( indice, 1 );
// Mostramos los resultados en la consola:
console.log( numeros );
Puede visitar Eliminar un intervalo de elementos dentro de un Array Javascript (?). Allí explico un poco el funcionamiento del método splice
(se incluye ejemplo gráfico). También puede consultar Array.prototype.splice() para profundizar un poco más sobre el tema.