Вопросы с меткой [wget]
GNU Wget - это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS и FTP, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его легко вызывать из сценариев, заданий Cron, терминалов без поддержки X Window System (X11) и т.д.
735 вопросов
4
голоса
2ответа
797 показов
Стоит ли беспокоиться о попытках взлома через wget на веб-сервере на базе CentOS/LAMP?
Это немного сбивает с толку, кстати, я не системный администратор и знаю лишь немного о том, как обращаться с Linux. Я работаю на LAMP-сайте и размещаю его на Digital Ocean. Сервер CentOS 7, и я ...
4
голоса
1ответ
9k показов
Использование wget и передача заголовка Range вручную
Я хотел бы загрузить диапазон файла, который я определил явно. Насколько я знаю: wget --header="Range: bytes=1024-2048" http://www.example.com/file.tmp должен хорошо бегать. Тем не менее, он не может ...
4
голоса
1ответ
194 показов
Более оптимальный метод для создания нескольких изображений, которые отличаются только номером изображения в именах файлов
У меня есть текстовый файл download-list.txt который выглядит так: http://www.example.com/file/image1.png http://www.example.com/file/image2.png http://www.example.com/file/image3.png . . . Для ...
4
голоса
3ответа
4k показов
HTTP-ответы скручивают и получают разные результаты
Чтобы проверить заголовок ответа HTTP для набора URL, я отправляю с помощью curl следующие заголовки запроса foreach ( $urls as $url ) { // Setup headers - I used the same headers from Firefox ...
4
голоса
2ответа
64k показов
Wget без --no-check-сертификата
при попытке использовать wget на сайте https, мне нужно добавить wget --no-check-certificate https://... как я могу использовать более короткий аргумент? не используйте эту очень длинную строку.
4
голоса
3ответа
3k показов
Linux Wget, как отобразить процент прогресса после перезагрузки сессии?
Я запускаю debian Squeeze в режиме консоли на подключаемом компьютере. Я контролирую его, открывая сеанс SSH с компьютера с Windows, в той же локальной сети. Я начал скачивать большой файл с помощью ...
4
голоса
3ответа
337 показов
Как передать файл, который меняет имя, на другую команду в Bash?
Я часто использую wget для загрузки архивов и zip-файлов из Интернета, а затем либо распаковываю их, либо распаковываю их. Я делаю: wget google.com/somefile.zip unzip somefile.zip rm somefile.zip ...
4
голоса
4ответа
2k показов
Скачать форум с помощью wget с именем пользователя и паролем?
Я хочу скачать форум, на котором у меня есть доступ только через мое имя пользователя и мой пароль. Я попробовал следующее: C:\wget.exe wget -k -m -E -p -np -R ...
4
голоса
3ответа
2k показов
Как автоматизировать загрузку файлов?
Я получил книгу, которая имела пропуск для доступа к цифровым версиям сканов в высоком разрешении большинства произведений искусства в книге. Удивительно! К сожалению, презентация всех этих 177 ...
4
голоса
1ответ
7k показов
Какие единицы измерения использует wget для пропускной способности?
При загрузке wget сообщает скорость в "к / с". K ... что? килобит? килобайт? 1024 или 1000? Обновить: wget -O /dev/null http://newark1.linode.com/100MB-newark.bin производит "348 к / с". В то же ...
4
голоса
1ответ
7k показов
Как я могу заставить wget.exe говорить HTTP/1.1?
Я говорю о Windows, а не о Linux. Я старался: wget -O X:/test/some/dir/file.txt --tries=3 -c http://some.com/dir/data.txt wget -O X:/test/some/dir/file.txt --tries=3 http://some.com/dir/data.txt wget ...
4
голоса
4ответа
3k показов
загрузить серию файлов автоматически с помощью командной строки /wget
У меня есть случай, когда я хотел бы запустить автоматическую загрузку для списка из 114 файлов (чтение) для каждого читателя, например, если я хочу скачать чтения для читателя с именем abkr , ...
4
голоса
3ответа
8k показов
Можно ли заставить wget использовать одно соединение?
Я пытаюсь загрузить около 20 ГБ данных через FTP с помощью моей личной учетной записи (нет доступного scp и tar тайнинг невозможен). Я использую следующую стандартную команду: wget -m ...
4
голоса
2ответа
2k показов
Получить последний курс обмена с помощью командной строки?
Я ищу способ получить последний обменный курс онлайн с помощью командной строки. Я хочу использовать его с другой программой. До сих пор все, что у меня есть, это: wget -qO- ...
4
голоса
2ответа
1k показов
Загрузить все URL-адреса, доступные в данном домене, с помощью wget без сохранения реальных страниц?
Привет, пытаясь определить все действительные URL-адреса в данном домене, не имея зеркала сайта локально. Люди обычно хотят загрузить все страницы, но я просто хочу получить список прямых URL-адресов ...
4
голоса
2ответа
2k показов
Как я могу скачать форум phpbb с помощью wget, включая защищенные паролем разделы?
Я хочу скачать форум, который я модерирую, пока он не закрылся навсегда. Там есть некоторая полезная информация, которую я хочу сохранить для себя, и я не хочу экспортировать данные на другой ...
4
голоса
3ответа
1k показов
Как сделать резервную копию блога, запущенного на posterous.com
Я хотел бы сделать резервную копию содержимого моего блога, который работает на posterous.com. Я хотел бы сохранить все тексты и изображения на локальный диск. Возможность просматривать его в ...
4
голоса
4ответа
24k показов
Скопировать весь сайт, включая PHP и SQL?
Возможно ли при копировании всего сайта и шаблона с помощью wget (httrack или другой программы) также получить код PHP и базу данных SQL? Какое программное обеспечение мне понадобится для копирования ...
4
голоса
1ответ
3k показов
Сбой wget, но открытие в браузере происходит успешно. Как?
Я пытался скачать PDF с сайта Intel по этому адресу. Когда я открываю его через браузер (google-chrome), кажется, нет проблем с его просмотром или хранением на жестком диске. Но когда я пытался wget ...
4
голоса
4ответа
4k показов
Как я могу получить изображения общедоступного веб-сайта с помощью wget?
Как я могу получить изображения общедоступного веб-сайта с помощью wget? Это небольшой сайт: около 40 страниц и около трех изображений на страницу. Я хочу избежать: Загрузка изображений вручную ...
4
голоса
4ответа
1k показов
Комментирование в списке wget?
Мне нужно скачать около 100 пакетов, поэтому я использую wget-list, чтобы упростить его. Мой вопрос, однако, является ли я после того, как я составил список (я предполагаю, что он в формате .txt), ...
4
голоса
2ответа
7k показов
Как мне использовать пароль, который содержит специальные символы с 'wget'?
Мой пароль FTP имеет двоеточие; когда я делаю wget с моим именем пользователя и паролем, он продолжает жаловаться, что используется "неправильный номер порта". Есть ли решение? Я попробовал: трюк, но ...
4
голоса
2ответа
3k показов
Зеркальное отображение сайта WordPress с помощью wget
Я пытаюсь отразить сайт WordPress, который больше не обновляется, чтобы я мог удалить серверную часть php. У меня нет желания беспокоиться об обновлении сайта снова. Я понимаю, что это сломает ...
4
голоса
1ответ
4k показов
"Имя слишком длинное" при использовании Wget
Я пытаюсь получить копию каталога. Я хотел бы получить подробности "Просмотр списка" и "Показать объект". URL, который я пытаюсь wget : ...
3
голоса
2ответа
1k показов
Wget/ Bash загрузки определенного DIV
Я только что столкнулся с этой проблемой, и мои маленькие знания в программировании убивают меня прямо сейчас;) Итак, у меня есть определенная галерея на сайте обмена изображениями, это ImageBam, я ...
3
голоса
2ответа
8k показов
Как я могу продолжить цикл в bash после того, как приложение вернуло ошибку?
Я сохраняю изображения с: #!/bin/bash for i in {1..30000} do wget "http://services.runescape.com/m=itemdb_rs/3809_obj_sprite.gif?id="$i done Есть ли способ ускорить процесс? Иногда URL не существует, ...
3
голоса
2ответа
6k показов
Получение wget для загрузки только файлов с определенными шаблонами имен
Я хочу использовать wget для DL некоторых файлов. Я хочу DL только файлы, чье имя соответствует определенному шаблону, например ???. Txt, а не любые другие * .txt файлы. Можно ли это сделать с ...
3
голоса
1ответ
969 показов
Невозможно разрешить хост с помощью curl/wget, пока страница загружается в браузере
Проблема, с которой я сталкиваюсь, заключается в том, что, хотя я открываю ссылку в своем браузере, она загружается быстро, но всякий раз, когда я пытаюсь использовать ссылку в терминале, например, ...
3
голоса
6ответов
15k показов
Как узнать, что файл уже загружен в командной строке Linux?
Если вы загружаете большой файл в Linux через командную строку, есть ли команда, чтобы узнать, если он уже завершен? В настоящее время я проверяю, совпадает ли размер файла с ожидаемым размером ...
3
голоса
1ответ
9k показов
wget - получение только файла .listing в каждом подкаталоге
если я использую команду "wget --no-remove-list -P ...../debugdir/gnu// ftp:/gnu//", я получу файл .listing этого каталога. Но я должен пройти через все последующие подкаталоги, чтобы получить всю ...
3
голоса
1ответ
111 показов
Предотвратить wget от размещения разрывов строк в заголовках файлов?
Когда я запускаю следующую команду: wget http://mywebsite.com/app/count.php -O count.txt Я заметил следующее: Saving to: ‘count.txt\r’ wget помещает переносы в мои имена файлов! Есть ли способ, ...
3
голоса
1ответ
2k показов
Разница между загрузкой файлов из wget и браузера
У меня есть прямая ссылка http://oocairo.naquadah.org/dist/oocairo-1.4.tar.bz2 И он загружает прекрасный веб-браузер хрома. Но через wget $ wget http://oocairo.naquadah.org/dist/oocairo-1.4.tar.bz2 ...
3
голоса
2ответа
3k показов
Каков пользовательский агент по умолчанию при использовании wget в Linux?
Каков пользовательский агент по умолчанию при использовании команды 'wget' в Linux. Я не пытаюсь подделать сайт, когда он используется, я просто хочу знать, что появляется в журналах Apache. Спасибо!
3
голоса
2ответа
2k показов
Разбор переменных с помощью Bash и Wget
Я пытаюсь использовать wget в простом скрипте bash, чтобы получить изображение в формате JPEG с камеры Axis. Этот сценарий выводит файл с именем JPEGOUT вместо желаемого вывода, который должен быть ...
3
голоса
2ответа
2k показов
Избегайте создания нескольких файлов с помощью wget
Я использую wget для вызова ссылки каждые 10 секунд, например: #/bin/sh while true; do wget http://www.some.random.link/to/some/PHP/script sleep 10 done В результате создаются пустые файлы с именем ...
3
голоса
2ответа
3k показов
Wget - если / еще условие загрузки?
Я хочу, чтобы wget предпочел определенный тип файла другому, если файлы имеют одинаковое базовое имя. Например: если доступно foo.ogg , не загружайте foo.mp3 способ, которым я до сих пор использую ...
3
голоса
2ответа
45 показов
Как я могу скачать файл, как только он станет доступен в Linux?
Как я могу настроить что-то на компьютере с Linux, чтобы в тот момент, когда файл на веб-сервере возвращал что-то отличное от ошибки 404, он загружал его. Я хотел бы, чтобы он прекратил проверять ...
3
голоса
2ответа
582 показов
Рекурсивные загрузки после перенаправления
Мои цели: Я хочу загрузить все файлы * .zip на страницу, где все соответствующие ссылки перенаправляются серверным скриптом ( */download.php?standard=yes&file=*.zip ). Я хочу, чтобы исходная ссылка ...
3
голоса
2ответа
5k показов
Как я могу заархивировать чью-то страницу профиля в Facebook?
Я думал об использовании archive.is или archive.org. Я пытался просмотреть страницу в приватном браузере, но он просит войти, чтобы сайт увидел то же самое. Я пытался открыть консоль разработчика и ...
3
голоса
2ответа
2k показов
linux: как запустить aria2 или wget только через eth0
У меня есть компьютер под Linux с несколькими сетевыми картами, например: eth0, eth1, eth2, eth3. Есть ли способ запустить какой-либо загрузчик, например aria2 или wget, только через один интерфейс, ...
3
голоса
1ответ
6k показов
Скрипт Bash не ждет окончания загрузки wget
Я использую следующий скрипт bash для объединения различных архивов gzip: wget -O bluelvl1.gz http://list.iblocklist.com/?list=ydxerpxkpcfqjaybcssw&fileformat=p2p&archiveformat=gz wget -O bluelvl2.gz ...
3
голоса
1ответ
1k показов
wget начиная с произвольного байта
Используя флаг -c , я могу сказать wget возобновить загрузку. Затем wget запросит размер уже существующего файла, чтобы сообщить серверу, откуда возобновить загрузку. Есть ли способ сказать, что wget ...
3
голоса
3ответа
8k показов
Рекурсивная загрузка подпапки с помощью wget - --no-parent, очевидно, не работает
Мне нужна документация по XUL, но у меня нет доступа к Интернету в большинстве случаев. Итак, я попытался скачать Учебник Mozilla с помощью следующей команды: wget --no-parent -r -l 2 -p -k ...
3
голоса
1ответ
1k показов
Как использовать wget для загрузки изображений из сообщений на Facebook?
Это выглядит немного сложнее, чем обычно. Я новый пользователь wget, и я подумал, что, возможно, можно каким-то образом войти в Facebook и загрузить только изображения из определенного разговора. Я ...
3
голоса
1ответ
5k показов
Как бы я `wget` файлы, а затем сохранить их по дате загрузки, а не имя файла?
Моя цель: загрузить 131 JPEG и сохранить его в формате имени файла, который относится к формату даты / времени, а не к имени файла. Я уже пробовал вещи, которые включают изменение имен файлов после ...
3
голоса
1ответ
185 показов
wget -k -O- никогда не возвращается
Кто-нибудь знает почему wget -O- http://www.google.com а также wget -k http://www.google.com работает просто отлично, но wget -k -O- http://www.google.com ... никогда не вернется? Использование wget ...
3
голоса
1ответ
572 показов
Функция ожидания Wget не работает должным образом
Фон: Я использую wget (версия 1.14-15.el7) в RedHat Linux (версия 7.3 (Maipo)), в терминале Bash (версия 4.2.46 (1)). К сожалению, я ограничен этим конкретным образом RHEL, поэтому я не могу перейти ...
3
голоса
0ответов
692 показов
копировать файл, только если размер файла отличается от wget, не обращая внимания на метку времени
wget -N http://host/path/file.jpg извлечет файл, если файл существует в целевой папке, но изменился либо размер файла, либо его временная метка. Моя проблема в том, что исходный сервер изменяет ...
3
голоса
8ответов
9k показов
Как начать пользоваться Wget?
Пожалуйста, прости меня за этот вопрос. Обычно я пытаюсь узнать это сам, прежде чем беспокоить других, но моя ситуация срочна - если я не буду действовать сейчас и не загружу все фотографии моей ...
3
голоса
2ответа
8k показов
wget прекращает загрузку: невозможно записать в `- '(успех)
Пожалуйста, имейте в виду, что я ничего не знаю ни о серверах, ни о каком-либо их словаре, я простой веб-кодер, пытающийся найти свой путь во вселенной. Я пытаюсь связать Dropbox на моем сервере, я ...