Вопросы с меткой [wget]

GNU Wget - это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS и FTP, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его легко вызывать из сценариев, заданий Cron, терминалов без поддержки X Window System (X11) и т.д.

0
голосов
1ответ
321 показов

Как я могу заблокировать WGET для конкретного домена с сервера?

У меня работает много узлов js, и сценарии не могут быть остановлены или изменены. (Включая код для скриптов) Сценарий делает запросы к домену, скажем, example.com. Он слишком много спамит в этом ...
0
голосов
2ответа
3k показов

Flashgot больше не совместим с Firefox Quantum (57)...Любое исправление?

В предыдущих версиях Firefox и Chrome жизнь прошла гладко благодаря моему удобному стилю, когда в моих браузерах загружались перехваты Wget и Curl с установленным расширением flashgot. Но все это ...
0
голосов
1ответ
68 показов

Wget не выходя из читаемого домена

Linux Centos 6-64 Что я должен добавить в wget, чтобы он только читал ссылки на запрошенный домен и не переходил на другие домены, упомянутые в загружаемом сайте? Пример: при зеркалировании site1.com ...
0
голосов
0ответов
37 показов

Ошибка чтения в конце файла, который я загружаю - в чем ошибка?

Я пытаюсь загрузить обновленную прошивку для какого-либо устройства (это Belkin Network Exentder, но это несущественно). Мне удается добраться до 97%, увидев: $ wget -c --verbose ...
0
голосов
2ответа
422 показов

Как автоматически получать изображения с сайта SSL, который использует сервлеты Java

Это сложно. Я хочу использовать curl, wget или любой другой инструмент для входа на сайт SSL, который предоставляет форму входа. Затем я хочу посетить несколько ссылок в этом домене и получить ...
0
голосов
0ответов
84 показов

Проблемы с загрузкой изображений Wget

У меня проблемы с загрузкой изображений с веб-сайта, может помочь; пожалуйста? Я попробовал следующее. wget --no-check-сертификат https://traxxas.com/sites/default/files/images/products/1584.jpg wget ...
0
голосов
1ответ
36 показов

wget рекурсивные загрузки только индексный файл

Я следовал за одним из ответов, приведенных в этом посте, чтобы загрузить посты блога, и только это, никаких внешних ссылок, но рекурсивная функция, похоже, не работает, так как загружается только ...
0
голосов
0ответов
77 показов

WinWget - использование входного файла

У меня есть входной файл, где я хочу скачать несколько изображений. Форма такая https://asite.com/img1.jpeg https://asite.com/img2.jpeg И так далее... Я использовал WinWget. Я нажал « Add Job затем ...
0
голосов
0ответов
51 показов

Iptables, перенаправляющий все локально сгенерированные пакеты

Я пытаюсь перенаправить все локально сгенерированные пакеты на определенный IP-адрес, используя следующее правило IPtables: iptables -t nat -A ВЫХОД -j NETMAP --в 127.0.0.2/32 Это похоже на работу с ...
0
голосов
0ответов
326 показов

Почему Wget '-c' '--continue' не работает в Windows?

Я установил wget с (система управления пакетами pip) и установил часть своего файла, и на следующий день я скачал свой файл с параметром -c, и он не работает. Почему опция -c не работает в Windows?
0
голосов
0ответов
109 показов

Как использовать wget и регистрировать вывод большого файла, как мне избавиться от индикатора выполнения?

Я пытаюсь просмотреть свои данные, и мне требуется много времени, чтобы, наконец, добраться до 100%, когда я прокручиваю вниз. Я просматривал руководство и -b, а также -nv не показывает мне конечный ...
0
голосов
0ответов
180 показов

wget - извлечение файла с его расширением

У меня есть файл "f.txt", присутствующий в следующем URL, как показано ниже HTTP://XXX-int-wap02/DocApp/doc.asp Document = YYY Когда я нажимаю на вышеуказанную ссылку в браузере, загружается документ ...
0
голосов
1ответ
317 показов

Используйте wget для загрузки файла выше определенного размера

Я использую wget для загрузки изображений с сайта друга. Однако я хотел бы загружать только файлы, размер которых превышает 1 МБ. Как мне этого добиться?
0
голосов
0ответов
15 показов

wget - N всегда перезагружает файл, даже если timetemp не изменяется

Я нашел этот сайт о том, как скачивать файлы, временная метка которых изменилась: https://www.gnu.org/software/wget/manual/html_node/Time_002dStamping-Usage.html Я попробовал это, но wget всегда ...
0
голосов
1ответ
3k показов

wget timeout - продолжает пытаться

Сейчас я загружаю около 100 файлов с конфигурацией «по умолчанию» на wget. Я застрял на одном пакете (подозреваю, что пакет перемещен) и wget продолжает повторять попытки. Я подумал, что после 3 или ...
0
голосов
0ответов
205 показов

Ubuntu Server 16.04.04 nslookup, пинг работает. wget, apt-get, curl зависает

Ubuntu Server 16.04.04 nslookup, пинг работает. wget, apt-get, curl зависает. $ cat /etc/resolv.conf nameserver 77.88.8.8 nameserver 77.88.8.1 $ iptables -S #, так что правил вообще нет -P INPUT ...
0
голосов
1ответ
417 показов

Как Wget войти на этот сайт

Я пытаюсь зайти на сайт с помощью следующей команды, но что-то не хватает: wget --no-check-certificate --save-cookies cookies.txt --keep-session-cookies --post-data ...
0
голосов
0ответов
163 показов

wget не скачивает файлы с поддоменов

Я хочу скачать PDF-файлы из домена. некоторые файлы размещены на поддомене. Как я могу сделать так, чтобы wget скачивался с поддоменов? Пример: я пытаюсь загрузить файлы с этого веб-сайта, где файлы ...
0
голосов
1ответ
438 показов

Wget игнорирует видео файлы

Мой друг разместил кучу mkv-файлов на общедоступном сервере, как я могу загрузить их все одной командой wget? я пытался wget -r [path] который просто захватывает индексный файл robots.txt и ...
0
голосов
1ответ
1k показов

wget FTP: как рекурсивно скачать весь каталог БЕЗ .listing файлов?

Я хочу загрузить весь каталог с моего FTP-сервера, и это можно сделать с помощью параметра wget с параметром -m . wget -m --ftp-user=aaaa --ftp-password=bbbb ftp://xxx.xxx.xxx.xxx/dir Тем не менее, я ...
0
голосов
1ответ
69 показов

wget не разрешает доступ к файлу

Когда я использую wget для загрузки командного файла из Dropbox, затем пытаюсь запустить его, я получаю сообщение об ошибке, которое говорит, что у меня нет прав на использование этого файла. Пока ...
0
голосов
1ответ
475 показов

Запустите wget в фоновом режиме, но все равно увидите статус загрузки

Я запускаю wget в командной строке Windows (Vista) следующим образом: wget -b -o test.MP4 -r -A .MP4 -nH --cut-dirs=3 http://website.com Если я -b мне действительно нравится, что вывод, отображающий ...
0
голосов
1ответ
2k показов

Как использовать wget для загрузки pdf по ссылкам sci-hub

Сначала я публикую это в переполнении стека, однако сразу же получил голосование при закрытии. Поэтому я попробовал это здесь. http://sci-hub.cc/ - это сайт, целью которого является свободный обмен ...
0
голосов
2ответа
120 показов

Wget -m нужно использовать с аргументом -r --no-parent

Название в значительной степени говорит обо всем. Если я хочу отразить каталоги веб-сайта и подкаталоги. следует ли использовать wget -m -r --no-parent bla.com или использовать wget -r --no-parent ...
0
голосов
1ответ
90 показов

Как создать список страниц, на которые ссылаются из списка, который распределен по многим страницам

У меня есть веб-страница, которая в основном состоит из списка ссылок на другие страницы. Используя wget, я хотел бы скачать все перечисленные страницы. Используя "wget -r -l1 URL", я в основном ...
0
голосов
1ответ
270 показов

Есть ли программы, которые поддерживают NRPC? (Lotus Notes RPC)

Существуют ли какие-либо реализации Lotus Notes RPC (порт 1352)? Пример: wget NRPC:///bar/foo.xls -O foo.xls Чтобы мы могли загрузить файл, который доступен только через Lotus Notes DB?
0
голосов
1ответ
86 показов

невозможно подключиться к локальному веб-серверу

когда я пытаюсь подключиться к веб-серверу, установленному на компьютере в локальной сети, я не могу получить страницу индекса, компьютер хорошо настроен, потому что я могу пропинговать и ssh: пинг $ ...
0
голосов
0ответов
40 показов

используйте wget для самого последнего файла на http-сервере

Мне нужно скачать самые обновленные файлы с именем suite. Я использую Windows Server для запуска командной строки. Я написал следующую команду, но не уверен, как получить самую последнюю wget -r ...
0
голосов
1ответ
2k показов

Где находится каталог сохраненных файлов по умолчанию, использующий wget в crontab?

Я хочу скачать некоторые файлы с помощью команды wget в crontab . Я использую текстовый файл, чтобы составить список моих желаемых URL. Параметр wget -O хорошо работает для установки папки назначения ...
0
голосов
3ответа
2k показов

wget альтернатива загрузке файлов

Мне нужно загрузить 10 000 zip-файлов с FTP-клиента, на котором хранится около 40 000 элементов. Я обдумывал делать: $ cat > files.txt file1 file2 file3 file4 с $ wget -i files.txt Есть ли лучшее ...
0
голосов
0ответов
346 показов

Wget загружает файлы более одного раза?

Предположим, что есть веб-сайт, где страница A ссылается на страницу B, а страницы A и B - на страницу C. Что-то вроде A -> B -> C | v C Если я запущу рекурсивный wget на A, чтобы начать загрузку ...
0
голосов
0ответов
79 показов

Http начинает сбой через некоторое время с использованием Windows 8.1

У меня проблема с подключением в Windows 8.1, все выглядит нормально при перезагрузке системы для этого вызова wget. wget http://www.google.com/ как следующий результат. --2014-11-26 17:59:37-- ...
0
голосов
0ответов
34 показов

Как скачать HTML-страницы веб-сайта на основе отметки времени?

Я знаю, что это может быть повторяющийся вопрос, и я прошу прощения за это, но я не смог найти ответа на мою проблему. Я просто хочу скачать html-файлы Pages без какого-либо другого содержимого, и ...
0
голосов
1ответ
303 показов

Войти на сайт используя wget

У меня проблемы со входом на эту веб-страницу с помощью wget: http://dealers.volare-kinderfietsen.nl/index.php?dispatch=auth.login_form Обычно это не проблема для меня. Я просто хочу сохранить куки ...
0
голосов
1ответ
261 показов

Зеркально отразите FTP-сайт, но создайте пустые файлы вместо полных, чтобы сэкономить трафик

Я хочу получить список всех файлов и каталогов на ftp://ftp.ncbi.nlm.nih.gov/snp/ . Но я не хочу загружать содержимое всех файлов. Чтобы сэкономить пропускную способность, я надеялся, что wget будет ...
0
голосов
2ответа
1k показов

Установите yum в CentOS без make

Я работаю с GoDaddy через SSH, и я заметил, что ОС (CentOS 5.8) не имеет yum . Кажется, у него есть wget и rpm , но он не имеет make , поэтому я столкнулся со стеной, пытаясь установить yum после ...
0
голосов
1ответ
202 показов

не могу открыть архивы .gzip, полученные с помощью wget

Я пытаюсь загрузить содержимое каталога, размещенного на сервере, используя wget в терминале cygwin. У меня нет проблем с получением файлов, но все они являются архивом .gz и после загрузки их ...
0
голосов
1ответ
762 показов

Как мне отразить подкаталог сайта с помощью wget

Мне нужно отразить следующий URL: https://web.archive.org/web/20100515230709/http://markowitzbocadentist.com/ Но мне нужно зеркалировать только файлы с этой даты «20100515230709». Я перепробовал ...
0
голосов
1ответ
286 показов

Попробуйте скачать mp3 с помощью wget, но он перенаправляет на другой сайт?

Я пытаюсь скачать mp3-файлы с этого адреса hanialrefai, используя wget следующим образом: wget -r -l0 -k -p -A.mp3 http://hanialrefai.com но он перенаправляет меня на http://quantsa.ru/?pw и затем ...
0
голосов
0ответов
60 показов

Как сказать wget, чтобы пропустить произвольно вложенную, именованную директорию?

Я знаю, как сказать wget пропустить абсолютный каталог, например, -X images/thumbs . Но я не могу заставить wget пропустить все каталоги с именем thumbs , независимо от того, как называется каталог ...
0
голосов
1ответ
138 показов

Скачать файл на Unix с целевого URL, который автоматически загружает файл при посещении страницы

Я пытаюсь загрузить файл на компьютер с Unix из командной строки. Доступ к GUI на этой конкретной машине будет довольно сложным. Файл загружается автоматически при посещении URL-адреса в ...
0
голосов
2ответа
1k показов

Какой самый простой способ скачать с помощью wget в удаленном терминале замазки, используя локальное подключение к Интернету через Windows

Я хотел бы начать загрузку, используя wget в удаленном терминале замазки (то есть на сервере Ubuntu), но используя локальное подключение к Интернету через Windows. Я думаю, что есть два способа ...
0
голосов
1ответ
68 показов

интегрировать wget с оперой 27

Я хочу интегрировать wget в оперу, я не нашел в Интернете ничего, кроме этой статьи http://archive09.linux.com/feature/59457, которая устарела (до 2007 года), и я не нашел инструментов-> предпочтения ...
0
голосов
0ответов
598 показов

Wget усек мои файлы

wget -c -b --content-disposition 'http://example.com/somepath.mp4' У меня были некоторые проблемы с подключением, поэтому мне пришлось повторно запустить эту команду для нескольких удаленных файлов. ...
0
голосов
2ответа
257 показов

Получить структуру каталогов / файлов без полезной нагрузки с FTP-сервера

Мне нужно рекурсивно получить структуру файлов / каталогов FTP-сервера, получая только имена файлов (без полезной нагрузки). Можете ли вы помочь мне, как это сделать? (curl , wget , ...). Результатом ...
0
голосов
0ответов
120 показов

Wget, который останавливается при ограничении загрузки

У меня более 200 экранов на моем сервере. Я установил лимит загрузки в каждом нижнем wget: --limit-rate=1K . Единственная проблема заключается в том, что через сто секунд он считается законченным, ...
0
голосов
1ответ
2k показов

Как скачать файл, который находится за CGI запрос с помощью CLI?

Я хочу скачать mp3-файл с онлайн-курса. Но файл находится за перенаправлением CGI. URL-адрес: « ...
0
голосов
1ответ
2k показов

wget и axel не смогли скачать ссылку с круглыми скобками

если ссылки на скачивание, имеющие круглые скобки, не могут скачать wget и axel. например эту ссылку: alachiq@alachiq:~$ wget ...
0
голосов
1ответ
59 показов

Сочетание клавиш, чтобы убить скрипт, содержащий несколько виджетов?

У меня есть сценарий Python, который видит множество файлов: for year in range(2010, 2015): for month in range(1, 13): filename = url filename += "/T%s%s_BNFT.CSV" % (year, month) os.system('wget %s' ...
0
голосов
1ответ
78 показов

Вернуть URL из файла

Предположим, что я скачал файл в GNU/Linux с помощью wget, история в терминале очищена, и мне нужно вернуть URL-адрес, с которого я скачал файл. Как мне идти? Что-то вроде резервного поискового файла ...