Вопросы с меткой [wget]
GNU Wget - это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS и FTP, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его легко вызывать из сценариев, заданий Cron, терминалов без поддержки X Window System (X11) и т.д.
735 вопросов
1
голос
1ответ
547 показов
Перенос огромных файлов на новый сервер через FTP
У меня есть выделенный сервер в Германии с данными 120 ГБ, так как я купил новый выделенный сервер в США, я хотел бы перенести все файлы на новый сервер через FTP-соединение, чтобы добиться этого, я ...
1
голос
1ответ
870 показов
Что такое curl-эквивалент wget -qO (wget -q -O)?
Мне нужно запустить следующую команду в Red Hat Linux: wget -q -O http://somepage/somefile.cgi | удар Но у меня не установлен wget. Я мог бы установить его, но я хочу знать, как сделать это с помощью ...
1
голос
0ответов
56 показов
Как я могу загрузить изображение с более низким разрешением из URL-адреса изображения? У меня нет контроля на стороне сервера
Итак, я вижу, что мы можем использовать диапазон -r в curl. Есть ли способ, чтобы вместо загрузки полного изображения с URL(чужого) я мог просто использовать более низкую пропускную способность и ...
1
голос
1ответ
2k показов
Как скачать папку dropbox с помощью wget?
Кто-то поделился со мной папкой с фотографиями в Dropbox. Я хотел бы загрузить папку dropbox, содержащую изображения на коробке Linux, без установки какого-либо программного обеспечения dropbox. Мне ...
1
голос
2ответа
405 показов
Почему весь сайт не загружен?
Я попытался сделать копию сайта wiredhealthresources.net с помощью команды: wget -rpkl inf wiredhealthresources.net Но команда загрузила только 54 файла! Большинство страниц отсутствуют, например ...
1
голос
2ответа
350 показов
Скачайте список файлов и используйте имя домена в качестве имени файла
Я получил кучу файлов для скачивания, который прекрасно работает с wget -i list_of_urls но моя проблема в том, что wget использует имя файла загруженного файла. Есть ли способ (или другой ...
1
голос
2ответа
4k показов
Как загрузить файлы из общих ссылок Amazon Cloud Drive через командную строку?
Я уже давно пользуюсь Amazon Cloud Drive (ACD), и я очень рад, что кто-то разработал для него клиент командной строки (называемый acd_cli). Это позволяет мне синхронизировать файлы с моими ...
1
голос
0ответов
1k показов
Загрузка WGET с https очень медленная
У меня проблемы с производительностью wget, если он использует протокол https. С нескольких серверов большинство работают нормально, но один из них работает в 10 раз медленнее и создает высокую ...
1
голос
0ответов
684 показов
Может пинговать URL, но не может получить доступ через cURL или wget
У меня возникла проблема, когда я могу ping , но я не могу использовать wget или curl . Это вывод этих команд. Я скопировал рабочую виртуальную машину Vagrant с одного ПК с Win7 на другой, и это ...
1
голос
1ответ
115 показов
почему это заклинание wget не получает нужные файлы
В настоящее время я пытаюсь загрузить данные с сервера https с помощью wget. Есть много подпапок и файлов, но меня интересует только одно расширение файла (* .raw). (Родительские папки не нужны) Эти ...
1
голос
1ответ
226 показов
Как я могу запустить эквивалентную команду «curl», которая работает аналогично этой команде «wget»?
У меня есть команда wget : wget -r --no-parent -nH -nd -q --show-progress --progress=bar:force ftp://ftp.ncdc.noaa.gov/pub/data/swdi/database-csv/v2/ Но это работает только в более новых версиях wget ...
1
голос
1ответ
5k показов
Остановить Chrome, игнорируя ERR_CONTENT_LENGTH_MISMATCH для загрузок?
Иногда я обнаруживаю, что загрузка с использованием Google Chrome прерывается, что приводит к обрезанию файлов. Похоже, что Chrome определяет эту ситуацию как ERR_CONTENT_LENGTH_MISMATCH, но затем ...
1
голос
1ответ
143 показов
Как wget может загружать ISO-файлы, если в библиотеке FTP указан только файл iso.gz?
Я столкнулся с поведением wget с FTP-сервера (URL: ftp://foo.com/bar/... ), которое мне было незнакомо. Можете ли вы направить меня к какой-либо документации или объяснить, как это возможно? Если я ...
1
голос
3ответа
243 показов
Переименование файлов, извлеченных с помощью «wget --mirror» в Bash, перед загрузкой в статически размещенную область Amazon S3
Я пытаюсь заархивировать и загрузить старый сайт в статически размещенную область Amazon S3. Я смог получить содержимое с помощью wget , используя следующую команду: wget --mirror --no-parent ...
1
голос
1ответ
175 показов
прогресс загрузки wget в обратном порядке?
Я понятия не имею, что случилось, но вдруг он начал показывать индикатор в обратном порядке ... HTTP-запрос отправлен в ожидании ответа ... 200 ОК Длина: 4102725632 (3,8 ГБ) [приложение / поток ...
1
голос
2ответа
2k показов
Эквивалент Powershell для переключателей wget "-nc" и "-i"
Что такое Powershell-эквивалент этой команды wget? wget -nc -i downloadList.txt куда -i downloadList.txt загружает список URL-адресов в указанном файле. -nc пропускает уже загруженные файлы.
1
голос
1ответ
5k показов
Как можно "нажать" кнопку веб-страницы из командной строки, чтобы перезапустить кабельный модем?
Я пытаюсь перезагрузить мой кабельный модем программно. Я имел обыкновение делать это с помощью wget: wget http://192.168.100.1/reset.htm?reset_modem=Restart+Cable+Modem Однако я изменил свой ...
1
голос
1ответ
1k показов
Wget для FTP заканчивается в "соединение отказано"
Я хочу скопировать каталог FTP на мой сервер (Debian) с помощью команды wget. Я старался : wget -m --user=user --password=passftp://ftp.domain.com У меня есть эта ошибка: connection... failed : ...
1
голос
2ответа
680 показов
Как узнать фактический код веб-страницы для элемента <div>
Я использую wget для сохранения веб-страницы в файл annie.html. % wget -qO- http://www.swagbucks.com/watch/video/523803/annie > annie.html Внутри этого файла эта строка: Вопрос: как мне получить ...
1
голос
1ответ
364 показов
Wget скорость загрузки колеблется
Поэтому я загружаю ISO с сайта Uberstudent, используя команду wget, отображаемую на их сайте. Но скорость загрузки постоянно колеблется, и мне интересно, что может быть причиной этого? Я имею в виду, ...
1
голос
1ответ
582 показов
скрипт разборов тегов wget
Я пытаюсь сделать резервную копию сайта, содержащего страницы с таким тегом: jwplayer("12379-video").setup({ file: "http://xyz.cloudfront.net/abc/moviename.mp4", flashplayer: ...
1
голос
1ответ
1k показов
'wget --continue' не работает с '--no-clobber'
Я работаю под Windows 7 и хочу загрузить все новые файлы из каталога сервера Windows через HTTPS с помощью wget. Кроме того, я хочу возобновить загрузку больших файлов в случае потери соединения во ...
1
голос
1ответ
67 показов
Bash: вернуть все символы между n-ными вхождениями двух разных строк в строке
В скрипте bash (в Ubuntu 14.04) я запускаю команду: WP055="$(wget -qO - http://alerts.weather.gov/cap/wwaatmget.php?x=CAZ055&y=1)" В строке переменной WP055 будет неизвестное число пар «» и «». Мне ...
1
голос
1ответ
3k показов
Получить исходный файл из GitHub с помощью инструментов командной строки?
Этот вопрос связан с вопросом вне сайта FATAL: MemorySanitizer не может отобразить теневую память. Человек, который ответил, сказал: У вас работают простые тесты (например, этот)? По этой ссылке я ...
1
голос
1ответ
29 показов
Как работать с прокси с помощью Sudo на ВМ
У меня Ubuntu установлен на виртуальной машине VirtualBox, и я использую NAT. Для работы хост-сети требуется проверка подлинности прокси NTLM. Я попытался export HTTP_PROXY=proxy.mycomp.com:80 & ...
1
голос
2ответа
381 показов
Загрузка файла с использованием WGET при запуске под файлом CMD
Я пытаюсь загрузить фотографию из Интернета, но всегда возникает ошибка. Я попытался запустить команду в пакетной программе ".cmd" со следующими кодами: wget ...
1
голос
2ответа
486 показов
Файл сценария Wget Bash не найден
У меня есть следующий скрипт: for i in {1..16}; do $wget http://url/$i.jpg -O C:/Users/User/Desktop/Test/ done Сохраните файл как test.sh и запустите его в Git на windows. Файлы работают на сервере, ...
1
голос
0ответов
791 показов
Полное копирование сайта с помощью wget
Я пытаюсь выполнить полное копирование сайта, я знаю, где местоположения потокового видео, однако, заставить процесс работать так же эффективно и продуктивно, оказывается трудным. Первая проблема ...
1
голос
0ответов
177 показов
может ли wget ограничить количество найденных страниц / ссылок в рекурсивном режиме / режиме паука?
я использую wget для любого: рекурсивный поиск некоторых сайтов, паук (получить ссылки с веб-сайтов) Иногда я хотел бы получить только определенный произвольный максимум страниц / ссылок. ...
1
голос
1ответ
379 показов
Wget возвращает http 404
Я просто хочу скачать все файлы по этой ссылке: http://www.vision.caltech.edu/pmoreels/Datasets/TurntableObjects/ImageSet070504/ Я пробовал wget с множеством разных опций, все они возвращают "ОШИБКА ...
1
голос
0ответов
90 показов
wget только новые или обновленные файлы, когда исходные файлы сжаты, но файлы назначения распакованы
Я хотел бы знать, как wget файлы из URL, которые хранятся со сжатием bz2. Тем не менее, я хотел бы только видеть новые и обновленные файлы относительно моего места назначения, где файлы хранятся без ...
1
голос
2ответа
475 показов
Почему wget -m не сохраняет документы index.html
Я делаю копию сайта с wget -m -p -q http://example.com Процесс работает нормально, но в копии отсутствуют все файлы index.html, хотя я вижу, что они были успешно запрошены, и все связанные файлы ...
1
голос
3ответа
832 показов
Bash: выполнение связанных переменных
У меня есть сценарий Linux bash, с целью: COMMAND_TO_EXECUTE="foo "$1" --option1 --option2 "$2 exec $COMMAND_TO_EXECUTE Проблема: скрипт не работает Подсказка отладки : если я echo ...
1
голос
1ответ
1k показов
Сбой соединения в wget
Когда я пытаюсь использовать wget в Windows 7, происходит сбой с таким сообщением: > wget ftp://ftp.fu-berlin.de/tex/CTAN/systems/texlive/tlnet/tlpkg/texlive.tlpd --2017-07-10 14:37:47-- ...
1
голос
1ответ
1k показов
Вывод wget mangling, записанный в stdout, работает только с -q
У меня есть минимальный HTTP-сервер, написанный на python (http://pastebin.com/mjLDk7Gk), который просто отвечает на каждый запрос GET со статусом 200 и телом "Done". Если я сделаю wget ...
1
голос
1ответ
4k показов
Почему cURL медленнее, чем wget
Тестовая страница: https://www.beobank.be/nl/Home.aspx Это результат использования wget (или реального браузера): # time wget https://www.beobank.be/nl/Home.aspx -O /dev/null --2015-01-26 12:05:46-- ...
1
голос
2ответа
198 показов
Wget mirror должен воспринимать xml как html
Я хочу сделать зеркало сайта, который имеет динамическую карту сайта в форме XML. Конечно, я хочу, чтобы этот файл сайта загружался и обрабатывался так, как если бы это был HTML-файл. Я попробовал ...
1
голос
1ответ
427 показов
Как заставить wget создавать соответствующие нулевые байтовые файлы?
Я пытаюсь использовать wget для загрузки целых каталогов с их содержимым с веб-сервера. Некоторые файлы там имеют нулевую длину. Есть ли способ заставить wget создать 0-байтовый файл на клиенте? ...
1
голос
1ответ
1k показов
Wget команды curl застрять без ответа
Я пытаюсь запустить команду curl в Ubuntu 14.04 curl -v https://omnitruck.chef.io/install.sh | sudo bash -s -- -P chefdk -c stable -v 0.18.30 и это застрять в Getting information for chefdk stable ...
1
голос
0ответов
583 показов
Wget медленная скорость загрузки
У меня ужасно плохая скорость загрузки, когда я пытаюсь загрузить файлы в Banana Pro (аналогично Raspberry Pi) с помощью wget. С помощью wget я получаю около 1,5-2 МБ / с, а на другом компьютере - ...
1
голос
2ответа
307 показов
Как использовать wget на сайте с китайскими иероглифами
Я пытаюсь создать статическую версию динамически управляемого сайта с помощью wget. Проблема в том, что когда я делаю это на сайте с китайскими иероглифами, а не на странице аккуратно сформированных ...
1
голос
1ответ
111 показов
Расширенное использование Wget
У меня есть список из примерно 200 серверов, которые содержат ссылки на отдельные файлы, для этого вопроса давайте просто представим, что они являются .txt файлами. Мне нужно скачать каждый файл, ...
1
голос
0ответов
351 показов
FTP: подстановочный знак загрузки
Я пытаюсь скачать файл с именем, оканчивающимся на * .csv Проблема осложняется тем, что этот * .csv содержит в каталоге неизвестное имя: например. Иногда это будет 2015-> Дата 29:10:20:10-> One.csv ...
1
голос
2ответа
466 показов
Wine: Как скачать файл из CMD?
Подобно тому , как люди в основном принесли всю среду bash в Windows , по различным причинам , и играть с bash там, я хотел бы сделать что - то подобное в очень небольших масштабах. Я заметил, что ...
1
голос
1ответ
396 показов
Сохранить всю веб-страницу со всеми изображениями и css в одну папку и один файл с помощью wget?
Есть ли способ имитировать функцию «Сохранить как» в браузере с помощью wget? Когда я сохраняю веб-страницу в браузере, я получаю папку с ресурсами (изображения, js, css) и индексный файл с именем ...
1
голос
0ответов
539 показов
Как скачивать файлы с сайта используя bash
Я пытаюсь загрузить коллекцию файлов с веб-сайта. Где коллекция взята из "TAGS". Я попытался использовать много комбинаций сценариев wget и bash scripts но безуспешно. Каждый файл вложен в свою ...
1
голос
1ответ
3k показов
Как скачать каталог dropbox или файлы с командной строкой на сервере Linux
Мне нужно переместить очень большой каталог с Dropbox на S3 ~ 250 ГБ, но я не могу найти простой способ сделать это. (У меня нет учетных данных dropbox, это общая ссылка) 1) Из моего браузера, ...
1
голос
1ответ
424 показов
Как читать RSS-канал Telegraph?
Согласно Telegraph.co.uk, RSS-каналы мировых новостей должны быть такими:http://www.telegraph.co.uk/news/worldnews/rss Однако с Chrome я получаю только пустую страницу. Даже wget ...
1
голос
2ответа
637 показов
Как загрузить несколько файлов с помощью Wget из Cygwin для Windows
У меня есть ссылка, которая включает в себя 12 файлов, и я хочу скачать все из них, используя только одну команду в Wget . И я использую Cygwin в качестве терминала для запуска Wget . Ссылка ...
1
голос
1ответ
327 показов
У Wget возникли проблемы с сохранением файлов, которые я хочу - исключить каталоги, похоже, не работает
Я хочу загрузить все государственные расходы свыше 500 фунтов стерлингов Министерством энергетики и изменения климата. Это файлы .xls и .xlsx, генерируемые один раз в месяц. Они хранятся в таких ...