Мне нужно скачать 30000+ .mp3 файлов! каждый из них ~ 200 кб ..
Я пытался загрузить их все или в 6 комплектах (5000 файлов каждый раз) с помощью Internet Download Manager, но он зависает. Какой менеджер загрузок может обрабатывать столько файлов?
4 ответа
Я обычно делаю файлы размером 3 КБ <.5 МБ и использую Free Download Manager.
Я не могу сказать, есть ли лучшие или более легкие решения, но это работает и делает то, что мне нужно - я иду по страницам, щелкаю правой кнопкой мыши, добавляю все в IDM, затем, когда я закончу, я выделяю их все в IDM и начнем!
Я никогда не делал 30 КБ за один раз, но, надеюсь, это поможет!
Как уже сказал @Shiki: wget
wget -i
прочитает все URL из внешних файлов и обработает их
Я использую curl (http://curl.haxx.se/). Он имеет кучу полезных функций для массовых загрузок. Это позволяет вам указать много файлов за один вызов, например так:
CURL.EXE http://example.com/file[1-10].mp3
Это загрузит "file1.mp3", "file2.mp3" и так далее.
Я использовал его, чтобы загрузить много файлов, но не 5000. Однако в принципе это должно работать.
Jdownloader http://jdownloader.org/download/index Это интересный мультиплатформенный загрузчик Java, который постоянно разрабатывается. Он совсем не легкий и может быть угрозой безопасности для всех, кого я знаю. 30k, вероятно, должно быть сделано в разделах. но у него есть способ сделать резервную копию списка и загрузить списки в. Его основной дизайн, кажется, больше о загрузке с "публичных серверов", но он хорошо работает для обычных вещей.
Я видел в нем 5000 предметов, но это было потому, что я попросил его проанализировать ссылку, которая продолжалась вечно, упс.