Skip to main content
12 eventos
cuándo alternar formato qué por licencia comentario
el 10 mar. 2023 a las 12:33 comentario añadido Patricio Moracho El proceso que tienes que hacer, ¿podría hacerse obteniendo los datos desde una base de datos tradicional, sqlite, mysql, sql server etc? ¿Necesitas todas las filas o eventualmente podrías obtener una muestra más pequeña para hacer el análisis?
el 10 mar. 2023 a las 12:31 comentario añadido Patricio Moracho Lamentablemente la única solución es conseguir más memoria, si es un equipo de escritorio, se agrega bancos de memoria, si es uno virtual tal vez puedas contratar más memoria. El otro camino es más complejo, optimizar el proceso para minimizar los requerimientos. No te puedo decir mucho por que no sé que es lo que piensas hacer con esos 12 data.frames, pero puedo sugerirte algunas coas: ¿Necesitas cargar todos al mismo tiempo o puedes hacer lo que tengas que hcer con cada data.frame de a uno por vez ? ¿Necesitas todas las columnas del csv o solo algunas?
el 10 mar. 2023 a las 12:27 comentario añadido Patricio Moracho Por el código que muestras, no hay ninguna optimización posible así que casi seguro el problema es de falta de memoria. En R todos los objetos nativos que se cargan van a parar a la memoria RAM. Podrías verificarlo, cargando de un archivo por vez y en cada paso monitorear la memoria (Si usas Rstudio tienes un botón con varios reportes en la solapa enviroment), en algún momento seguramente llenaste la memoria y ahí empiezan los problemas.
el 9 mar. 2023 a las 22:46 historial editado Mayra Santiago CC BY-SA 4.0
agregue el código usado
el 9 mar. 2023 a las 22:43 comentario añadido Mayra Santiago @PatricioMoracho Gracias por aclararme lo de la capacidad de procesamiento y sugerencias, estoy iniciando y saltan muchas dudas.
el 7 mar. 2023 a las 13:10 comentario añadido Patricio Moracho Y me olvidaba, Bienvenida a Stack Overflow en español, te sugiero que hagas el recorrido de bienvenida y de paso ganes tu primer medalla, también es muy importante que leas Cómo preguntar para poder mejorar tu pregunta y que sea bien recibida por la comunidad mejorando así, tus chances de obtener buenas respuestas.
el 7 mar. 2023 a las 12:29 comentario añadido Patricio Moracho Te sugiero: edita la pregunta y agrega (1) un ejemplo de las dos primeras líneas de dos archivos, (2) muestranos el código que estás usando para importar los CSV.
el 7 mar. 2023 a las 12:27 comentario añadido Patricio Moracho Primer tema que deberías analizar, antes que importar los datos, ¿tienes memoria suficiente para manejar 5.7 millones de filas? si la tuvieras, entonces tendría sentido importar los datos, el tema es como lo estás haciendo, desconozco por que no publicaste nada de código. Una alternativa para "juntar" archivos es no usar R sino las herramientas del SO para juntar físicamente cada uno, pero depende que el formato sea siempre el mismo y eliminar eventualmente cabeceras repetidas.
el 7 mar. 2023 a las 12:24 comentario añadido Patricio Moracho Me suena a que se trata de un problema de memoria Por lo que cuentas del proceso necesitas al menos la memoria RAM suficiente para manejar el doble de los 5.7 millones de filas, aunque depende de como estés haciendo el proceso de carga, puede que necesites muchos más. Ten en cuenta que Rstudio Cloud, al menos la versión gratuita tiene un limite de memoria incluso más bajo que el de un equipo de escritorio.
el 7 mar. 2023 a las 5:43 respuesta añadido José Antonio Burgos Francisco línea de tiempo puntuación: 0
S el 7 mar. 2023 a las 2:49 revisar Primeras preguntas
el 7 mar. 2023 a las 3:56
S el 7 mar. 2023 a las 2:49 historial formulada Mayra Santiago CC BY-SA 4.0