Получить все публичные файлы с помощью wget

Question

Там есть хост и порт (с поддержкой TCP), на котором запущена служба http. просто

wget host:port

ничего не возвращает. Можно ли получить список всех доступных файлов (html или txt) на этом хосте (и данный порт), которые можно просмотреть?

Может быть, есть какой-то шаблон, как

wget host:port/*.[html|txt] или что-то

Answer 1

Эта команда ...

$ wget --spider DOWNLOAD-URL 

проверит, доступен ли для скачивания DOWNLOAD-URL .

Вы можете проверить эту ссылку для получения дополнительной информации о wget: Ultimate Wget Guide. Также ознакомьтесь с руководством по wget вас, возможно, более интересных опций.

Answer 2

Попробуйте использовать Поиск Google с оператором site:

Пример: я хочу узнать URL-адреса, размещенные на nlp.stanford.edu:8080 . Решение: я иду в Google Search и ввожу поисковый site:nlp.stanford.edu:8080 . Затем я использую wget, чтобы начать поиск по всем URL-адресам, найденным в результатах поиска.