Ya probe la función y funciona, ahora tengo otro inconveniente, como tal necesito listar todos los parquets dentro de un cosa que al llamar la función que colocaste funciona pero al dar clic al boton procesar, cuando capturo el parquet seleccionado como no viene con la ruta desde donde está mi función de procesar no puede hacer el render html para visualizar en la vista el parquet
mi funcion es la siguiente
@cargaBasedatos.route('/procesar', methods=['POST'])
def procesar():
nombre_parquet = request.form.getlist('sel_dataset[]')
act_hdfs = True if get_activate_hdfs()=='on' else False
spark = create_sc()
datos = []
nombres = []
for i in range(len(nombre_parquet)):
if act_hdfs:
ruta_parquet = get_hdfs_path() + get_workspace_hdfs + '/' + nombre_parquet[i]
else:
ruta_parquet = (get_workspace() + nombre_parquet[i])
data = spark.read.parquet(ruta_parquet)
data = data.limit(6).toPandas()
datos.append(pd_to_html_responsive(data))
nombres.append(nombre_parquet)
close_sc(spark)
return json.dumps({'data': datos,'nombre_parquet': nombre_parquet})
Lo que finalmente necesito es que en la vista salgan los parquet pero sin todo el path desde donde vienes es decir mi select debe quedar solo con el nombre del parquet, pero al capturarlo en procesar debo tener ese path desde donde esta el parquet para que pueda procesarlo y pintarlo en la vista, como la función solo lista los nombres la función procesar recibe solo nombre y cuando procesar la ruta que construye es
C/documents/workspace/nombre.parquet lo que está mal ya que falta el path desde donde está ese parquet
mi vista debe verse así
Debajo de la lista está el boton de procesar que envía el listado de parquets seleccionados, pero no los envía con la ruta desde donde vienen solo está enviando el nombre y la función procesar construye la ruta a buscar así solo con el nombre y no desde donde esta realmente el archivo
Y la otra función con la que si funciona me los lista así
así funciona y se construye bien la ruta en procesar porque al seleccionar los parquet va con todo el path pero se necesita tener en el select solo el nombre del parque y no todo el path pero a su vez mantener ese path para capturarlo en procesar