У меня есть список 9k веб-адресов и пара ключевых слов.
Я хотел бы знать, содержит ли веб-страница это слово. В идеале, автоматический поиск в Google с некоторыми операторами поиска будет работать отлично, например, если вы будете искать
"keyword" site:"https://www.example.com"
результат был бы удовлетворительным (так как он будет возвращать "не найден" или набор URL, где ключевое слово было найдено), но, поскольку у меня есть такие непростые веб-страницы, это противоречит их условиям и правилам для автоматического поиска по всем 9-тысячным веб-страницам.
Каков был бы обычный способ сделать это?
Я не прошу способ обмануть Google, просто для любых других возможностей, которые вообще не связаны с Google, я мог бы искать.