Preguntas con la etiqueta [databricks]
La etiqueta databricks no tiene orientación de uso.
6
preguntas
0
votos
0respuestas
10 vistas
Read and list Blobs in Databricks that are stored in Azure Storage Account with append type
We have a problem in Databricks when we try to read and list blobs with type append located in Azure Blob Storage container.
Reviewing the Databricks documentation we found this page that explain our ...
0
votos
0respuestas
104 vistas
Error con modelo LDA al predecir nuevas entradas usando pyspark.ml.clustering en databricks
He entrenado y guardado un modelo LDA para clasificación de temas usando pyspark.ml.clustering en databricks, pero cuando intento predecir temas a nuevas entradas de texto obtengo un error.
Este es el ...
1
voto
0respuestas
109 vistas
Obtener el número recomendado de topics de un modelo LDA usando pyspark.ml
He entrenado un modelo LDA usando pyspark para clasificar textos por temas, probando diferentes valores para K. Sin embargo, para validar que el K seleccionado es correcto quisiera obtener el ...
1
voto
1respuesta
190 vistas
Como leer con pyspark ficheros en databricks desde DBFS que han sido dejado como resultado de una ejecución anterior
Tengo un par de notebooks en databricks el notebook1 para el tratamiento de textos (tokenizar, borrar stopwords...) que da como salida un fichero de texto limpio. El notebook2, lee el texto limpio y ...
0
votos
0respuestas
8 vistas
Es posible hace un loop en SQL databricks?
es que tengo este codigo
select a.Cliente_Rut, a.Periodo_Id, a.Razon_Social, a.Tramo_Ventas_Iva, a.Numero_Trabajadores,
a.Rubro, a.Fecha_Inicio, a.Fecha_Termino_Giro, a.Tipo_Contribuyente
...
0
votos
1respuesta
21 vistas
Spark Delta Lake crea muchos archivos .parquet
Estoy intentando hacer un upsert endeltalake
val updatesDF = ... // define the updates DataFrame[date, eventId, data]
DeltaTable.forPath(spark, "/data/events/")
.as("events")
.merge(
...