я использую wget для любого:
- рекурсивный поиск некоторых сайтов,
- паук (получить ссылки с веб-сайтов)
Иногда я хотел бы получить только определенный произвольный максимум страниц / ссылок.
Единственные ограничения, которые я нашел в wget, это:
- объем (Мб / Кб и т. д.)
- уровень рекурсии каталога
- скорость загрузки
Можно ли ограничить количество скачиваемых ссылок?