Preguntas con la etiqueta [dataframe]

Un dataframe (marco de datos, cuadro de datos o matriz de datos) es una estructura tabular de datos, es decir, una tabla de datos. En general sus datos pertenecen a filas que son observaciones y columnas que son variables de varios tipos. Los términos "data frame" y "dataframe" se utilizan en varios lenguajes (R, Apache Spark, deedle, Maple, las bibliotecas como pandas en Python o DataFrames en Julia), y "tabla" es el término utilizado en MATLAB y SQL.

Filtrar por
Ordenado por
Etiquetadas con
0 votos
1 respuesta
23 vistas

Unión de Dataframes con Spark mediante dos columnas

Estoy estudiando Big Data y se me presenta el siguiente problema en Spark databreaks. Tengo tres dataframes, en formato csv, con tres columnas: Precio Medio: Previsión demanda: Previsión eólica: ...
0 votos
2 respuestas
1k vistas

Como iterar un dataframe segun los indices de una serie en Pandas

Me gustaría iterar un dataframe y, solo ver, las filas que coincidan con los índices de la siguiente serie: He logrado convertir la serie a un Array de indices con .index y .values: Gracias a este ...
1 voto
1 respuesta
20 vistas

Problema al utilizar función para reemplazar valores tipo character usando R

Se tiene un DataFrame con una de sus columnas llamada "llamado_provincia", se trata de los llamados al 137 por problemas de violencia familiar o abuso sexual. Lo descargué desde datos.gob.ar/...
0 votos
1 respuesta
379 vistas

¿Cómo cargo una gran cantidad de archivos sin que gaste muchos recursos? Python - Pandas

Estoy intentando realizar un proceso de ingesta con múltiples archivos (1200), el problema es que cada archivo pesa en promedio 300 MB, se pone complejo dada la poca RAM que tengo (16GB), quisiera ...
0 votos
0 respuestas
11 vistas

¿Cómo puedo hacer un loop para obtener bases de datos en R con las siguientes especifícaciones?

¿Cómo puedo realizar un loop en R que me permita cargar una serie de bases de datos que van desde 1997 hasta el 2022 (considerando solo los meses de Marzo, Junio y Septiembre con nombres similares ...
1 voto
3 respuestas
28 vistas

Eliminar filas con NA en todas las columnas numéricas dataframe R

Tengo un dataframe con varias columnas, la primera contiene los identificadores y las siguientes valores numéricos. Quiero eliminar las filas que cumplen con la condición de tener NA en todas sus ...
1 voto
1 respuesta
14 vistas

Pasar un numpy array de 3D a pandas dataframe

Necesito pasar un array guardado como np.save("........npy) y recuperado con np.load(".....,npy) con este shape: (2367, 16, 100000) a un dataframe de 2367 filas y 16 columnas, cada array ...
2 votos
3 respuestas
2k vistas

¿Cómo contar la ocurrencia de observaciones en data frame en R?

Estoy dándole vueltas y no logro poder resolver esto: Tengo el siguiente data frame D1 D2 D3 D4 Prot 1 NA NA NA 6 2 10 NA NA 1 2 NA NA NA 1 3 1 NA NA 1 3 24 NA NA 1 3 ...
0 votos
1 respuesta
27 vistas

Columnas cruzadas en DataFrame

Tengo un dataframe (que surge de unir varios .csv) donde tengo 2 columnas que tienen contenido cruzado entre ellas, alguna idea de como solucionarlo, gracias. Ejemplo inimputable1623['nacionalidad']....
1 voto
1 respuesta
23 vistas

¿Como sumo meses o años a una columna de un DataFrame?

me gustaría saber como puedo sumar años o meses a un DataFrame... Intente hacerlo con dateutil.relativedelta: PND2['INICIO_ENDOSO'].head() + relativedelta(years=1) Pero me sale el siguiente error: ...
0 votos
1 respuesta
2k vistas

¿Cómo renombrar variables de un data.frame?

Necesito renombrar varias variables de un dataset. Tengo por ejemplo como variables a modificar: Año 2018 Año 2019 Año 2020 Necesitó cubrir los espacios en blanco por un guion bajo, es decir: ...
0 votos
0 respuestas
45 vistas

Guardar dataframe de python en una ruta especifica

Hola tengo un dataframe que estoy generando a partir de listas, y necesito que se guarde en una ruta especifica en un disco duro externo, alguna idea?
0 votos
0 respuestas
33 vistas

Error al crear una tabla con gt en R

Estoy intentando crear una tabla utilizando el paquete gt en R, pero me genera un error que no logro resolver. Aquí está el código que estoy utilizando: df <- data.frame( ID = 1:5, Name = c(&...
1 voto
1 respuesta
26 vistas

¿Cómo identidicar un cambio en una columna en Pandas Python?

Buen día Estoy leyendo un archivo excel con Pandas y el dataframe que se crea es algo parecido al siguiente Nombres Español Ingles Frances Portugues Nombre1 5 4 9 10 Nombre1 5 10 nan nan Nombre2 5 ...
1 voto
2 respuestas
2k vistas

¿Como abrir en un dataframe un csv delimitado por comas?

tengo el siguiente problema, intento abrir un archivo .csv separado en ',' como dataframe, sin embargo al abrirlo e indicarle sep=',' el dataframe generado carga toda la información en una sola ...
1 voto
1 respuesta
35 vistas

Error en hclust al generar un heatmap en R con valores NA/NaN/Inf

Estoy intentando generar un heatmap en R utilizando la función pheatmap. Tengo un conjunto de datos en formato df con múltiples columnas y algunas filas contienen valores NA. Al ejecutar el código, ...
0 votos
0 respuestas
25 vistas

Agregar las comunas de CABA a siniestros viales con pandas

Quiero agregar al df de siniestros viales con homicidios y lesiones un df de datos de comunas con la descripción de las ciudades que la integran, la población por comuna y cantidad por año. ¿Cómo hago?...
0 votos
1 respuesta
2k vistas

eliminar valores de una columna de un dataframe

Cómo elimino los valores que no tienen 4 dígitos de la columna años de un dataframe? df['Year'] = df['Year'].astype(str) df['Year'] = df['Year'].str.replace(r'') Después cómo selecciono un rango de ...
0 votos
1 respuesta
2k vistas

Obtener valores únicos entre dos columnas en Pandas

Necesito mantener valores únicos considerando dos columnas, ejemplo Considerando la tabla: I [Fecha] [Hora_1] [Hora_2]: 17 2021-08-18 07:01:02 10:16:48: 18 2021-08-18 07:01:02 ...
0 votos
1 respuesta
32 vistas

Renombrar y combinar columnas Pandas

Tengo un dataframe (que surge de unir varios .csv) donde tengo 2 columnas "subgrupo" y "Subgrupo", como tendría que hacer para quedarme con una sola columna que contenga los datos ...
0 votos
1 respuesta
2k vistas

¿como abrir un archivo de excel con pandas y filtrar los datos?

Tengo una inquietud acerca de importar un archivo de excel con panda, y es si se puede desde la importación filtrar los datos y asi limitar la cantidad de registros que se cargan en el dataFrame? Así ...
0 votos
0 respuestas
124 vistas

Como leer archivos de .msg con Python

Tengo como 100 archivos .msg. Estos archivos contienen texto sin tabular alineados solo usando espacios. Mi objetivo es hacer un DF con estos datos usando Pandas donde cada fila sea el Rain gauge. Los ...
1 voto
1 respuesta
616 vistas

¿Como unir fechas separadas en distintas columnas en pandas?

estoy trabajando con series de tiempo en python usando pandas, mi dilema es el siguiente, tengo esta tabla que ya la procese: Deseo unir el año,mes y dia en una sola columna para trabajar con las ...
1 voto
2 respuestas
5k vistas

¿Cómo numerar filas de un data.frame?

¿cómo puedo llenar una columna con 1 y 2 de un data.frame en r? por ejemplo de las filas 1:2 con 1 y 3:4 con el 2 data Especie Longitude Latitude bins2 1 Xenoomys -99.48703 19.91978 NA ...
0 votos
1 respuesta
1k vistas

Escribir en fila y columnas con bucle

Tengo que extraer las características de varios audios. Son 13 características las que se extraen en cada audio, cada una se guarda en una columna (llamada mfccs_mean + número del 1 al 13) de un ...
0 votos
1 respuesta
49 vistas

¿Cómo añadir un título a un dataframe? [cerrada]

Empezando a hacer cosillas en python me surge la siguiente duda. Estoy trabajando con un dataframe (panda) en python y me lee la primera fila como el título, pero no consigo que no me lo haga......
1 voto
1 respuesta
4k vistas

Copiar columna de un Dataframe a otro en Python

Tengo dos dataframes, los cuales tienen una columna llamada codigo_dx. En el primer dataframe he creado una columna llamada codigo_id con un código de tipo unsigned 32 que está relacionada con los ...
0 votos
2 respuestas
66 vistas

Problemas para guardar un DataFrame pandas enorme en csv

Tengo un DataFrame de pandas tal que así: col1 col2 col3 1 3 [-1.8888323233e-10, -1.998872201333-12... 3 1 [-3.88873222e-11, -2.9998882201... 2 0 ...
0 votos
1 respuesta
131 vistas

Error al insertar caracteres especiales como Ñ y acentos á, é, í, ó, ú. usando BULK OPENROWSET desde python

Estoy teniendo problemas al insertar informacion a una tabla de mi base de datos SQLSERVER 2008 desde mi proyecto python haciendo uso OPENROWSET BULK y es que a pesar de que el archivo CSV genera bien ...
0 votos
2 respuestas
3k vistas

¿Cómo puedo agregar filas en un Data Frame con 6 columnas y conservar los datos de 4 columnas y cambiar solo el valor de dos de ellas?

Tengo un Data Frame de Indicadores Mundiales. En este se contiene información de 200 países, a lo largo de 54 años y con poco más de 1300 indicadores distintos. Estoy haciendo limpieza de mi Data ...
0 votos
1 respuesta
7k vistas

Dataframes,ordenar valores de columnas de mayor a menor

me gustaría ordenador los valores de una columna de un dataframe de mayor a menor y luego restar la diferencia entre el mayor y el menor de todos,como pueod hacerlo?Esto es lo que he intentando y me ...
1 voto
1 respuesta
42 vistas

como guardar cambio de una columna en el mismo dataframe?

Estoy trabajando en python con un dataframe, y estoy removiendo un elemento especifico de la columna si se cumple la condicion. asi estoy removiendo los ceros: list_temp=[] for i in data['columna']: ...
0 votos
1 respuesta
3k vistas

Importar DataFrame a Excel sin perder los datos existentes con Python

Lo que estoy intentando hacer es, mediante python y la librería pandas: 1º Leer una de las hojas de un excel, dicha hoja tiene el nombre "BRUTO" (tiene más de una hoja): Para este paso uso ...
1 voto
2 respuestas
3k vistas

Comparar dos columnas de dos dataframe en R y determinar cuales son las filas diferentes

tengo dos dataframe, digamos DF1 y DF", que se parecen a los siguientes: |Symbol | Date | volume |price | |------------------------------------ |A |2014-01-01 | 1 | 5 | |A |...
0 votos
1 respuesta
3k vistas

¿Cómo usar un bucle for para cambiar el nombre de diferentes variables de dataframe?

Tengo un dataframe que quiero filtrar y guardar esos elementos filtrados en diferentes variables, para eso quiero ponerle el nombre a las variables de una columna (GPI) del mismo dataframe. Para eso ...
0 votos
1 respuesta
48 vistas

Desglosar diccionario en dataframe

estoy realizando un recopilatorio de datos, donde he obtenido un diccionario. Este diccionario quiero convertirlo en un dataframe normal, para en un futuro poder exportarlo a csv. Mi problema es el ...
0 votos
1 respuesta
7k vistas

¿Como pasar filas a columnas en R?

Hola Comunidad quería preguntares si es posible dejar el usuario con id 10 en una sola fila dejando como identificador la variable id y las demás variables pasarlas a columnas usando R. Gracias
0 votos
0 respuestas
39 vistas

Hay alternativas para la función shift en Python?

Estoy intentando crear una función que busca en una determinada columna cambios según dos condiciones, por lo que se usa la función shift; sin embargo, cuando se aplica la función en una columna de ...
0 votos
2 respuestas
2k vistas

Dividir registros en bloques dataframe

intento dividir un dataframe de 10000 registros en bloques de 200 de manera óptima en python. uso un monotonically_increasing_id y luego los divido por rangos, pero es muy lento. ¿existe otro método? ...
0 votos
1 respuesta
1k vistas

Indicar valor en gráfica de barras a partir de dataframe

he visto varias preguntas similares, he tratado de aplicarlas, pero no he conseguido dar con la respuesta. A ver si me podeis ayudar. Lo que quiero es indicar el valor al lado de cada barra. Dejo mi ...
0 votos
1 respuesta
1k vistas

¿Cómo reiniciar (borrar datos) de un archivo CSV?

Tengo un archivo CSV que acumula datos cada vez que ejecuta el programa: 0 2021-12-06 16:48:52.424938 Usuario 1 0 1 1 2021-12-06 16:52:47.856487 Usuario 2 2 2 2 2021-12-06 16:52:47....
0 votos
0 respuestas
80 vistas

Transformar columna de DataFrame en serie

Estoy trabajando con un DataFrame y necesito usar una columna 'nombre' del DataFrame como indice, el campo 'Descripcion' como las columnas y 'precioUnidad' como los valores de las filas. Describo los ...
0 votos
0 respuestas
27 vistas

Como invertir la leyenda

tengo problemas para invertir los ejes. Por alguna razon ggplot lee la leyenda en orden alfabetico y asigna mal los valores. El azul deberia ser la ocupacion y el rojo los arribos, pero esta al reves. ...
0 votos
0 respuestas
18 vistas

Merged data condicionado a fila especificas en R

Tengo el siguiente problema: Dataframe 1 : con datos de empresas de diversos países. Dataframe 2 : con datos económicos de países. Quiero crear un Dataframe 3 donde aparezcan todos las columnas, ...
0 votos
0 respuestas
107 vistas

filtrar datos con pandas

Estoy tratando de comparar dos columnas de un data frame, es decir, un merge para verificar si un elemento de una columna aparece en otra columna del mismo data frame y que finalmente me filtre el ...
1 voto
1 respuesta
40 vistas

¿Como puedo optimizar esta linea de código en python?

df_cnci = df_cnci[df_cnci['MAT.'] == i for i in l_mergeMAT] df_cnci[['NOMBRE','MAT.']] Lo que quiero realizar es que en la parte del for me obtenga el valor de la lista l_mergeMAT en cada iteración y ...
0 votos
1 respuesta
38 vistas

Seleccionar solo ciertas hojas de excel y unirlas en un solo dataframe en r?

Tengo un libro de Excel el cual contiene varias hojas de cálculo, de las cuales solo necesito importar 12 hojas y unirlas en un solo data frame. Las hojas que deseo unir son las siguientes: 1D, 2D, 3D,...
0 votos
0 respuestas
17 vistas

Corregir la siguiente función

Estoy creando la siguiente función para calcular la variable LeafArea_rf_model. La función realiza el procedimiento correctamente cuando tengo uso los mismos nombres de las columnas en la nueva base ...
0 votos
1 respuesta
64 vistas

Extraer los primeros 5 dígitos de una columna

Tengo este DF en python: Y me gustaría crear una columna que contenga solo los primeros 5 dígitos. ¿Alguna idea como podría hacerlo? Lo intenté de esta manera: cuenta1= DF['cuenta'].str[:5] pero me ...
0 votos
0 respuestas
15 vistas

Error R - referencias a valores o variables en dataframrs [duplicada]

Tengo este codigo R, que deberia ir tomando los puntos de la tabla en Y_datos segun el punto de X_datos que se indique, dependiendo del punto en X inicial dado (punto_central_index) y de H. El codigo ...

1
2 3 4 5
15