Línea de tiempo para ¿Cómo cargo una gran cantidad de archivos sin que gaste muchos recursos? Python - Pandas
Licencia actual CC BY-SA 4.0
4 eventos
cuándo alternar formato | qué | por | licencia | comentario | |
---|---|---|---|---|---|
el 13 sept. 2020 a las 21:28 | comentario | añadido | elulcao |
Intenta filtrar columnas que no necesitas, reducir e tamaño del chunksize verifica que puedas usar index_col=None , header=0 si todos los CVS son tienen las mismas columnas. También pd.concat puede servir si tienes la opción de concatenar el contenido de los archivos.
|
|
el 13 sept. 2020 a las 21:09 | comentario | añadido | Jefferson | Ok, entendido, pero hay alguna forma de optimizar los recursos? utilizar algo como iterator=True, chunksize=chunksize, low_memory=False ? | |
el 13 sept. 2020 a las 3:56 | revisar | Primeras publicaciones | |||
el 13 sept. 2020 a las 9:09 | |||||
el 13 sept. 2020 a las 3:52 | historial | respuesta | elulcao | CC BY-SA 4.0 |