Почему `wget` скачивает index.html вместо прямого файла?

Question

Я просто пытаюсь скачать это, но он всегда перенаправляет на главную страницу и в конце просто скачивает файл index.html, а не файл, который я пытаюсь скачать:

http://tweaking.com/files/setups/tweaking.com_windows_repair_aio.zip

Ребята, вы знаете, как правильно его скачать? Я использовал --user-agent = "Firefox + Linux, IE + Windows, (все, что вы можете думать)", но это не работает.

Это вывод, то же самое с --user-agent :

jaheaga@jaheaga:~$ wget  http://www.tweaking.com/files/setups /tweaking.com_windows_repair_aio.zip--2012-04-13 19:40:07--  http://www.tweaking.com/files/setups/tweaking.com_windows_repair_aio.zip
Resolviendo www.tweaking.com... 199.119.100.39
Conectando con www.tweaking.com[199.119.100.39]:80... conectado.
Petición HTTP enviada, esperando respuesta... 302 Found
Ubicación: http://tweaking.com [siguiente]
--2012-04-13 19:40:08--  http://tweaking.com/
Resolviendo tweaking.com... 199.119.100.39
Reutilizando la conexión con www.tweaking.com:80.
Petición HTTP enviada, esperando respuesta... 302 Moved Temporarily
Ubicación: http://www.tweaking.com [siguiente]
--2012-04-13 19:40:08--  http://www.tweaking.com/
Reutilizando la conexión con www.tweaking.com:80.
Petición HTTP enviada, esperando respuesta... 200 OK
Longitud: no especificado [text/html]
Grabando a: “tweaking.com_windows_repair_aio.zip.1”

    [ <=>                                                                            ]     46.913       234K/s   en 0,2s    

2012-04-13 19:40:09 (234 KB/s) - “tweaking.com_windows_repair_aio.zip.1” guardado [46913]

Answer 1

Пользовательский агент - хорошее начало, но в этом случае его недостаточно. Другое значение заголовка HTTP, которое часто проверяется, это 'Referer' [sic!]. Смотрите Википедию: HTTP Referer.

У wget есть опция --referer=url для указания ссылающейся страницы. Анализ трафика для успешной загрузки в Wireshark показывает, что он использовал следующий запрос от моей системы тестирования:

GET /files/setups/tweaking.com_windows_repair_aio.zip HTTP/1.1
Host: www.tweaking.com
User-Agent: Mozilla/5.0 (X11; Ubuntu; Linux i686; rv:11.0) Gecko/20100101 Firefox/11.0
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
Accept-Language: en-gb,en;q=0.5
Accept-Encoding: gzip, deflate
Connection: keep-alive
Referer: http://www.tweaking.com/content/page/windows_repair_all_in_one.html

В этом случае даже кажется, что вам не нужно подделывать User-Agent .

wget --referer=http://www.tweaking.com/content/page/windows_repair_all_in_one.html  http://www.tweaking.com/files/setups/tweaking.com_windows_repair_aio.zip

Делает трюк.