Soy nuevo utilizando Apache Spark, version 2.3.0. Me estoy basando en el código de ejemplo que viene en la página de Spark para poder utilizar el algoritmo k-means. Realizo el ejemplo que se muestra a continuación y lo corre perfectamente, pero al intentar utilizarlo con archivo csv salen los errores mostrados en la imagen.
Necesito saber qué estoy haciendo mal, si es la forma de cargar el archivo o modificar el código del algoritmo.
import org.apache.spark.ml.clustering.KMeans
import org.apache.spark.ml.evaluation.ClusteringEvaluator
// Loads data
val dataset = spark.read.format("libsvm").load("data/mllib/sample_kmeans_data.txt")
// Trains a k-means model
val kmeans = new KMeans().setK(2).setSeed(1L)
val model = kmeans.fit(dataset)
// Make predictions
val predictions = model.transform(dataset)
// Evaluate clustering by computing Silhouette score
val evaluator = new ClusteringEvaluator()
val silhouette = evaluator.evaluate(predictions)
println(s"Silhouette with squared euclidean distance = $silhouette")
// Shows the result
println("Cluster Centers: ")
model.clusterCenters.foreach(println)
features
que es el nombre por defecto que busca para la entrada deKMeans
. – ChemaCortes el 3 oct. 18 a las 7:23