Вопросы с меткой [wget]

GNU Wget - это бесплатный программный пакет для извлечения файлов с использованием HTTP, HTTPS и FTP, наиболее широко используемых интернет-протоколов. Это неинтерактивный инструмент командной строки, поэтому его легко вызывать из сценариев, заданий Cron, терминалов без поддержки X Window System (X11) и т.д.

0
голосов
2ответа
3k показов

Почему wget не работает с «https: Хост не найден» в Windows?

Я пытаюсь использовать wget в Windows 8.1. Я установил wget.exe в папку System32 и запустил wget на cmd. Но появляется следующая ошибка: M:\site>wget http://wordpress.org/latest.zip --15:44:37-- ...
0
голосов
2ответа
2k показов

Что происходит с wget, когда ssh-канал нарушается?

Скажем, я загружаю файл с помощью wget на серверную машину через SSH, и из-за некоторых проблем с интернет-соединением ssh выгоняет меня, говоря о сломанной трубе. Что происходит с загрузкой wget? ...
0
голосов
0ответов
684 показов

Загрузка видео с помощью командной строки

Я использую правую кнопку мыши и выбираю « Download Linked File As чтобы загрузить видеофайл на мой компьютер. Я хотел бы автоматизировать его с помощью сценариев, поэтому я открыл исходный код и ...
0
голосов
1ответ
944 показов

использование wget для загрузки с веб-сайта с чувствительными к регистру URL в Windows

Я использовал Gnuwin32 wget для загрузки руководств по emacs с помощью этой команды (занимает около 30 минут): wget --mirror --page-requisites --convert-links --no-parent --accept .html,.htm,.css,.js ...
0
голосов
3ответа
9k показов

Как скачать файл с URL в Linux

Обычно можно скачать файл с URL-адресом, заканчивающимся расширением файла. Чтобы загрузить Ubuntu ISO, достаточно просто wget http://releases.ubuntu.com/14.04.3/ubuntu-14.04.3-desktop-amd64.iso ...
0
голосов
0ответов
370 показов

httrack получает tumblr фотопосты, но не фотосеты; Зачем?

Я пытаюсь сохранить изображения Tumblr. Для сообщения с одним изображением, например, http://textsfromthepurikyua.tumblr.com/post/124075150094/textsfromthepurikyua-image-cure-heart httrack -n ...
0
голосов
1ответ
80 показов

Как сделать фото с помощью www.x.org/yy/index.php

У меня необычный случай. Я хочу использовать wget для загрузки всех картинок на http://www.indyprojectseed.org/2011/index.php и во все остальные годы. Как я могу сделать это с помощью цикла? Я сейчас ...
0
голосов
0ответов
706 показов

Скачать одну веб-страницу (включая изображения из CSS)

Я хочу загрузить одну веб-страницу, включая все необходимое для локального просмотра веб-страницы (включая изображения, ссылки на которые есть в CSS). Пример URL, который я хочу скачать: ...
0
голосов
1ответ
541 показов

Всегда ли wget -O записывает файл с нулевым байтом при ошибке или он может иметь другой размер?

При использовании флага -O wget, программа записывает кучу файлов нулевого байта, когда это терпит неудачу. У меня вопрос, размер всегда будет равен нулю? Или, может быть, ненулевой байтовый файл ...
0
голосов
0ответов
66 показов

Загружайте файлы в wget, используя полную полосу пропускания

Я использую приложение под названием WSUS для загрузки обновлений для Windows и Office. Он работает нормально, но проблема в том, что я нахожусь на основе подключения по времени, а wget (что WSUS ...
0
голосов
0ответов
56 показов

Wget на Windows - тот же файл продолжает перезаписываться

Я использую wget на Windows 7. Я загружаю много файлов, таких как это: http://stats.grok.se/json/en/200712/Wikipedia:WikiProject%20Video%20games кроме того, что я меняю дату каждый раз. Все ...
0
голосов
1ответ
244 показов

wget - получение pdf файлов из онлайн базы данных

Я использую wget для получения определенных файлов PDF с http://www.aph.gov.au/ Я только хочу получить файлы Hansard (стенограммы заседаний Палаты). Два сценария: Есть страница, где транскрипты ...
0
голосов
0ответов
233 показов

Автоматизация Gmail через Bash (для обновления POP Fetch из других аккаунтов)

В Gmail есть возможность получать почту с других учетных записей. Я использовал эту функцию для создания центрального почтового ящика. Работает хорошо. Gmail периодически опрашивает другой почтовый ...
0
голосов
0ответов
730 показов

wget - скачать подкаталог при отключении роботов

Например, я хочу скачать dir3 этого http://example.com/dir1/dir2/dir3. Robot.txt существует на http://example.com/dir1/ Это работает для, wget -e robots=off .... http://example.com/dir1/ Но не ...
0
голосов
1ответ
3k показов

Изменение разрешений wget и загрузок каталогов на Cygwin

У меня установлен Cygwin на моем Windows 7 64-битном ПК, и я часто скачиваю большие файлы с помощью wget. Однако wget сохраняет все файлы с разрешениями, которые запрещают мне выполнять файлы, когда ...
0
голосов
1ответ
547 показов

Как игнорировать родительские каталоги с помощью wget?

Я пытаюсь очистить определенный онлайн-каталог от своих файлов .flac. Я набираю следующую команду wget -r -a flac,FLAC http://website.com/directory В основном это дает мне все файлы, которые мне ...
0
голосов
0ответов
58 показов

Как сохранить копию этой веб-страницы?

Я хотел бы сохранить копию этой страницы в автономном режиме, чтобы я мог просматривать ее:http://forum.devmaster.net/t/advanced-rasterization/6145 Но я не могу загрузить копию этой страницы с ...
0
голосов
0ответов
203 показов

Клонировать GET-запрос на основе веб-сайта

Я пытаюсь сделать статический клон веб-сайта, потому что он работает на какой-то древней CMS, которая может в любой момент рухнуть. Я пытался использовать httrack и wget , но ни один из них не ...
0
голосов
0ответов
43 показов

Почему этот сайт не дает такой же ответ в wget, как в Firefox?

Я хочу получить экземпляры этой веб-страницы через скрипт, который внедряет изменения параметров в HTTP POST. Используя расширение Firefox Tamper Data, я захватил пример запроса. Вот необработанные ...
0
голосов
2ответа
905 показов

Какой инструмент использует yum для загрузки пакетов rpm с удаленного сервера?

У меня система centos, и сейчас я устанавливаю пакеты с помощью команды yum. Updating for dependencies: apr-util i386 1.3.9-1.el5 lxcenter-updates 203 k gcc-gfortran i386 4.1.2-52.el5_8.1 updates 3.1 ...
0
голосов
0ответов
345 показов

Chrome загружается в 60 раз медленнее, чем wget?

Я только что скачал большой файл (пакет KyngChaos PostgreSQL, файл 8,5 МБ). В Chrome он загружал со скоростью менее 1 КБ / с и сказал, что для доставки потребуется более часа. Когда я попытался ...
0
голосов
1ответ
304 показов

Скрипт wget некорректно завершает работу с ошибкой 126

Не получается запустить этот скрипт, у меня есть доступ пользователей к данным, которые я пытаюсь загрузить, но он просто не запускается. Если кто-то может помочь со скриптами wget, это будет ...
0
голосов
1ответ
298 показов

wget: отключить принудительное восстановление .html

При выполнении рекурсивной загрузки я определяю шаблон через параметр -R, чтобы wget отклонял его, но если этот файл является HTML-файлом, wget загружает файл независимо от того, соответствует он ...
0
голосов
1ответ
237 показов

Psexec с завитком или Wget

Недавно я узнал о psexec и подумал, может ли эта программа помочь мне запускать команды wget или curl на удаленном компьютере. это вообще возможно?
0
голосов
2ответа
2k показов

Как использовать wget для получения копий документов сайта Google Code?

У меня есть проект Google Code, в котором есть много вики-документации. Я хотел бы создать копию этой документации для просмотра в автономном режиме. Я хотел бы использовать wget или аналогичную ...
0
голосов
2ответа
737 показов

Почему wget не получает все страницы при зеркалировании этого сайта

Я хочу полностью отразить следующий веб-сайт: http://tinaztitiz.com Я использую следующую команду wget: wget -m http://tinaztitiz.com Веб-сайт представляет собой пользовательскую CMS и содержит ...
0
голосов
1ответ
6k показов

Загрузка с помощью wget с использованием referer + cookie

Я пытаюсь загрузить файл с веб-сайта, который требует входа в систему. Эта команда извлекает cookie.txt и загруженный html показывает, что я вошел в систему (хорошо): (Я разбил команду в строках для ...
0
голосов
0ответов
993 показов

Как сделать так, чтобы wget игнорировал определенные файлы?

Как мне сделать wget IGNORE определенными файлами? Я спрашиваю, так как он загружает их и удаляет их впоследствии, так как они не требуются (они исключены). Но есть ли возможность игнорировать их, ...
0
голосов
2ответа
663 показов

Как скачать файл из командной строки?

Я пробовал wget, powershell и betsadmin, но не могу этого сделать. Кто-нибудь может мне помочь ? URL (это ссылка на скачивание, если вы нажмете на нее в браузере): ...
0
голосов
1ответ
786 показов

Не можете записать на OVH-сервер (сломанный канал)?

Я пытаюсь выполнить эту команду для установки Windows на моем OVH VPS, и я получаю сообщение «Невозможно записать в« - »(Сломанный канал); root@rescue-pro:~# sudo -i wget -O- ...
0
голосов
1ответ
516 показов

Загрузка нескольких файлов параллельно с измененными именами

Я пишу сценарий bash и не знаю, как решить мою проблему. Я хочу скачать несколько файлов одновременно, но ... Я хочу сохранить файлы под измененными именами. У меня есть переменная с URL. ...
0
голосов
1ответ
94 показов

Ни wget, ни curl не загружают этот запрос API википедии

Я прекрасно могу скачать эту ссылку и сохранить ее в виде текстового файла в среде веб-браузера. Но я не могу скачать и сохранить этот запрос API википедии, не используя ни wget, ни curl. Я использую ...
0
голосов
1ответ
950 показов

wget не может разрешить имя хоста / узла после 1 загрузки файла

Недавно я пытался загрузить большое количество файлов с веб-сайта с помощью wget, и моя проблема в том, что после загрузки одного файла я получаю следующее сообщение об ошибке. --2012-06-28 ...
0
голосов
2ответа
1k показов

Linux WGET -O команда для несуществующих папок?

Я не могу wget пока нет пути для сохранения. Я имею в виду, что wget не работает для несуществующих путей. Например: wget -O /path/to/image/new_image.jpg http://www.example.com/old_image.jpg Если ...
0
голосов
3ответа
2k показов

Ограничение файлов с помощью wget

Я пытаюсь загрузить архивы списков рассылки, такие как http://cryolist.org/archives/ В частности, у меня есть страница, и я хотел бы загрузить каждый файл, связанный с этой страницей, который ...
0
голосов
0ответов
70 показов

Как я могу получить wget, чтобы всегда загружать файл, например, я не хочу "Файл уже полностью извлечен; ничего не делать"

Я даю очень простую команду, такую как wget http://www.example.com/updates/Avail.asp -O avail Который загружает очень маленький файл, содержащий всего несколько целых чисел, указывающих, какие ...
0
голосов
1ответ
330 показов

Wget на моем Mac не позволяет мне делать рекурсивные

Я на Mac под управлением 10,8, обновлен с течением времени с 10,6. У меня есть wget, который я использовал некоторое время для отдельных файлов, однако попытался выполнить старую команду из дней ...
0
голосов
1ответ
1k показов

Как скачать все mp3-файлы, ссылки на которые есть на сайте с помощью wget?

Ссылки на странице « http://www.examplepage.com/ » ведут на другую страницу http://www.archive.org/download/examplepage/asdf.mp3 . Как мне написать команду wget? wget -mH -A mp3 ...
0
голосов
5ответов
13k показов

Сканирующий сайт / паук, чтобы получить карту сайта

Мне нужно получить целую карту сайта в формате, подобном: http://example.org/ http://example.org/product/ http://example.org/service/ http://example.org/about/ http://example.org/product/viewproduct/ ...
0
голосов
0ответов
449 показов

Wget - не удается отправить данные поста

Я пытаюсь отправить данные поста через wget с помощью параметра --post-data, и я уверен, что это правильно, но это просто не работает. Я использую --post-data следующим образом: wget --post-data ...
0
голосов
1ответ
296 показов

Что произойдет, если wget не хватит места на диске?

Я собираюсь запустить wget для зеркалирования большого сайта для просмотра в автономном режиме. Я боюсь, что сайт может быть слишком большим для моего жесткого диска, и моя загрузка испортилась. Могу ...
0
голосов
2ответа
1k показов

cURL или xargs: показать прогресс

Я использую cURL, чтобы загрузить много файлов и объединить их в STDOUT. Около 100 000 маленьких файлов. Я хотел бы видеть прогресс против 100 000. Это возможно с помощью curl или с помощью curl в ...
0
голосов
1ответ
980 показов

Как скачать список файлов и постепенно переименовывать их с помощью wget?

У меня есть список, который содержит imgur ссылки, я хочу скачать с него ссылки и автоматически переименовать их с помощью wget. Например, это ссылки в списке: http://i.imgur.com/YSLB7eh.jpg ...
0
голосов
1ответ
253 показов

Используйте wget для получения ресурсов одной страницы (но ничего больше)

Я скачал и сохранил страницу index.htm и (в зависимости от некоторых критериев этой страницы) хочу использовать wget для извлечения всех изображений, javascripts, css-файлов и т.д., Которые браузер ...
0
голосов
0ответов
930 показов

wget через прокси в виртуальной коробке (cloudera quickstart VM - Cent OS)

Я установил Cloudera Quickstart VM 5.3.0, работающую в виртуальной коробке для Windows 7, и я хотел бы запустить команду wget но у меня проблемы с прокси-сервером моей компании (который требует ...
0
голосов
1ответ
48 показов

Apple Store показывает другую страницу в Wget

Живой URL istore.apple.com отличается от URL, который загружается с помощью wget Откройте этот URL в браузере https://itunes.apple.com/us/genre/ios-games-action/id7001?mt=8&letter=A Вы увидите ...
0
голосов
0ответов
52 показов

Wget целый сайт, без звука

Мои друзья показали мне сайт, и я хочу скачать этот сайт для автономного использования, в базовом формате .html. Используя команду: wget -r -k -p "www.flappyplane.net" Мне удалось получить сайт для ...
0
голосов
0ответов
800 показов

Заставить wget следовать "ссылкам JavaScript"

Я хотел бы рекурсивно отразить веб-страницу, но она использует ссылки javascript, такие как "javascript:readArticle(x)" . Я знаю, что такие ссылки просто переводятся в URL, скажем ...
0
голосов
0ответов
57 показов

Где wget помещает загруженные файлы в Windows?

Возможный дубликат: Где на моем компьютере Wget загрузил это изображение? Я пытаюсь загрузить файл с помощью wget в Windows 7. Я использовал следующую команду для загрузки файла: C:\Program Files ...
0
голосов
1ответ
265 показов

Использование Wget для загрузки файлов с определенным именем с сайта

Каков наилучший способ просмотреть домен (полу) верхнего уровня и все его подпапки на наличие определенных комбинаций цифр и букв. У меня есть несколько папок с большими списками изображений, и мне ...