Очистите сайт с помощью curl/wget, добавив параметр к каждому сайту

Question

Мне нужно очистить веб-сайт для всех сайтов и добавить параметр, например

www.theSite.com/allpages?myPara=us

Теперь я получил wget --recursive для получения всех сайтов, но он не добавляет параметр, а содержимое бесполезно. Мне нужно сделать это на втором этапе:

curl http://theSite.com/allpages?myPara=us | grep -c MyString

По сути, я ищу определенную строку во всем веб-сайте, к которому я получил доступ только через HTTP.

Answer 1

Теперь я справился с помощью скобок и скручивания:

curl http://www.mySite.com/category1/category2/{+cat1,+cat2,+cat3,+cat4,+cat4}?myPara=us | grep -c myString

Конечно, это не даст мне все сайты, но можно было бы разработать скрипт с помощью wget, regex, collection и loops.