Esto es debido a que justo después de la fecha imprimes el valor numérico de la celda, y en Excel las fechas se representan como números de coma flotante.
Creo que así lo verás más claro:
case Cell.CELL_TYPE_NUMERIC:
if(DateUtil.isCellDateFormatted(cell)){
SimpleDateFormat sdf = new SimpleDateFormat("dd/MM/yyyy");
String s = sdf.format(cell.getDateCellValue());
if(DateUtil.isCellDateFormatted(cell)){
System.out.println("fecha: " + s);
} else }{
System.out.println(cell.getNumericCellValue());
}
break;