Skip to main content

Línea de tiempo para ¿Cómo acelerar la descarga con wget?

Licencia actual CC BY-SA 4.0

8 eventos
cuándo alternar formato qué por licencia comentario
el 4 ene. 2022 a las 23:14 historial editado Firefly CC BY-SA 4.0
se añadieron 797 caracteres en el cuerpo
el 4 ene. 2022 a las 20:41 comentario añadido Firefly Intenté utilizar multiprocessing, pero de 12 archivos que debía descargar, se saltó el 8vo. Eso sí, mejoró el tiempo; pero no es confiable. ¿Puedo editar esta pregunta y mostrar el código nuevo?
el 4 ene. 2022 a las 19:09 comentario añadido abulafia Si el servidor no te soporta la cabecera Range, entonces no podrás usar varios hilos para descargar un solo archivo como se hace en la respuesta que enlazas. Sin embargo sí que puedes usar varios hilos para descargar varias imágenes a la vez. Aunque cada imagen seguirá tardando lo mismo, el total de las imágenes terminará antes. Hazlo con cuidado de todas formas no vaya el servidor a banearte por un exceso de peticiones concurrentes. Usar unas 10 simultáneas no debería causar problema.
el 4 ene. 2022 a las 19:08 comentario añadido gbianchi Tal vez seria interesante tratar de entender como usaste algo que era para descargas parciales aplicado a tu algoritmo... una cosa es paralelizar el mismo archivo, y otra paralelizar la descarga de multiples archivos...
el 4 ene. 2022 a las 18:55 comentario añadido Firefly OK. Gracias. Igual, ¿puedo hacerlo más rápido?
el 4 ene. 2022 a las 18:50 historial editado Firefly CC BY-SA 4.0
se añadieron 186 caracteres en el cuerpo
el 4 ene. 2022 a las 18:46 comentario añadido Christian No utilices print eso ralentiza enormemente la ejecución
el 4 ene. 2022 a las 18:44 historial formulada Firefly CC BY-SA 4.0