Есть ли способ сохранить все сообщения браузера HTTP и HTTPS (включая запрос, ответ, полные заголовки и тело) в файлах на моем компьютере?
Связь HTTPS должна быть сохранена расшифрована.
В идеале я бы искал что-то вроде расширения для Firefox или Google Chrome.
Это должно работать на Linux.
HTTPFox - это расширение Firefox, которое сделает эту работу.
=== РЕДАКТИРОВАТЬ ===
Щелкните правой кнопкой мыши панель запросов и выберите "Копировать все строки". Затем вы можете сохранить его в любом понравившемся вам редакторе - например, в Openoffice. Пожалуйста, смотрите изображение, которое я предоставил.
HAR - это HTTP-архив, и это именно то, что вы хотите сохранить (включая незашифрованный HTTPS).
К счастью, теперь это основная особенность всех основных браузеров (это было не тогда, когда вы задавали вопрос). Больше не нужно сторонних расширений.
В Firefox (v41+):
Другой браузер:
В последних версиях всех браузеров вы можете легко сохранить HAR:
Fiddler - это определенно то, что вы должны учитывать, даже если это не расширение, а отдельное приложение.
httpFox, httpScoop (только Mac) и httpWatch (IE, Firefox, только windows) - все эти инструменты я использую для этого. Кроме того, вы также можете попробовать Fiddler (как это было предложено ранее), а также, если вы используете Mac, вы можете попробовать Charles Proxy. Мой личный фаворит - httpWatch (вы можете легко фильтровать по заголовкам, контенту, URL и т.д.), Но это дорого, поэтому может не подойти.
Возможно, вы также захотите взглянуть на проект HAR (HAR означает HTTP-архив) и представляет собой основанный на стандартах подход к записи транзакций http, заголовков, содержимого и т.д. Ряд упомянутых инструментов способен экспортировать файлы HAR для просмотра с использованием его. HAR Viewer (с которым вы будете знакомы, если посмотрите на функцию водопада в Firebug). На самом деле, вы можете использовать Firebug для создания этих файлов / журналов, а также с помощью NetExport.
FWIW httpScoop - хороший метод для отладки / отслеживания HTTP-трафика в беспроводной сети. Я написал статью об этом некоторое время назад: http://blog.adtools.co.uk/trace-debug-mobile-application-http- запросы , использующие-MacOS /
Я нашел этот ответ, желая сделать это, и ни один из ответов здесь не подходил мне, потому что мне нужно было сбросить тела ответов HTTPS, очень как OP. Итак, для тех, кто приземлился здесь, как я, вот что я нашел.
В конце концов я попал на mitmproxy, который не является расширением Firefox, но выполняет задачу регистрации всего трафика Firefox. Это все Python, поэтому я установил его с помощью pip install mitmproxy - используйте менеджер пакетов, если хотите.
Запустил его с помощью mitmproxy для начальной настройки / отладки, а затем использовал mitmdump чтобы вывести поток, как только у меня все заработало и улучшилось .
Я просто настроил Firefox на использование 127.0.0.1:8080 в качестве прокси-сервера (8080 - порт по умолчанию для mitmproxy), и я увидел весь мой трафик Firefox, проходящий через mitmproxy. Чтобы включить HTTPS-трафик, вы должны принять сертификат, который создает mitmproxy - с настроенным прокси, просто перейдите по "магическому адресу" http://mitm.it в Firefox, нажмите кнопку "Другие", установите флажки чтобы доверять сертификату, и нажмите ОК.
Чтобы вывести незашифрованное тело ответа, мне пришлось использовать очень простой встроенный скрипт:
from libmproxy.model import decoded
def response(context, flow):
with decoded(flow.response): # automatically decode gzipped responses.
with open("body.txt","ab") as f:
f.write(flow.response.content)
Суть здесь - скачайте его как save_response.py и используйте его вместе с mitmdump -s save_response.py . Ответные тела начнут накапливаться в body.txt .
У mitmproxy также есть ряд полезных фильтров, которые вы можете указать для mitmdump, чтобы получить именно то, что вам нужно.
Wireshark может использоваться для захвата сетевых пакетов, в том числе на уровне протокола http, и сохранения их на вашем компьютере. Он также может захватывать информацию https, но я сомневаюсь, что вы сможете настроить его для расшифровки чего-либо.