Веб-страница JIRA, отображаемая в результатах поиска Google

Question

Несколько месяцев назад мы установили JIRA (и, следовательно, Java) на наш собственный веб-сервер, который является классическим LAMP и размещает несколько веб-сайтов через Apache vhosts.

Затем мы настраиваем файл зоны DNS нашего домена, чтобы адрес jira.ourdomain.com указывал на только что установленное приложение JIRA, а адрес www.ourdomain.com оставался бы в качестве адреса нашего корпоративного веб-сайта. Это работало нормально (после нескольких часов чтения документации и головной боли, так как мы абсолютно ничего не знаем о Java).

Но недавно мы заметили, что эта странная веб-страница: http://www.ourdomain.com/plugins/servlet/Wallboard/?dashboardId=10000 появляется в результатах поиска Google при поиске нашей компании / домена!

Что это за страница и как ее скрыть или полностью отключить, чтобы она была видимой и доступной для общественности? Я просматривал файл /opt/atlassian/jira/atlassian-jira/robots.txt на нашем сервере и добавил в него «Disallow *», но сомневаюсь, что это как-то связано с этим.

Answer 1

Решением действительно является файл robots.txt . Поисковые системы сначала проверяют их перед индексацией сайта.

Для Jira файл должен быть расположен в $JIRA-INSTALL/atlassian-jira/robots.txt , который в вашем случае выглядит как /opt/atlassian/jira/atlassian-jira/robots.txt . Тем не менее, правильный синтаксис для запрета всех поисковиков следующий:

User-agent: *
Disallow: /

(Первая строка указывает, что это относится ко всем сканерам, вторая указывает, что весь этот домен не должен индексироваться)

Помните, что это может занять некоторое время, прежде чем Google обновит результаты поиска. Чтобы сделать это быстрее, вы можете объявить устаревший контент ! (Подробнее на странице устранения неполадок)