Многие веб-сайты включают в свои условия обслуживания информацию о запрете автоматического доступа. Один пример находится в файле robots.txt на ebay:
Использование роботов или других автоматизированных средств для доступа к сайту eBay \n без явного разрешения eBay строго запрещено. Несмотря на вышесказанное, eBay может разрешить автоматический доступ к определенным страницам eBay, но только для ограниченного назначения, включающего контент в общедоступные поисковые системы. Любое другое использование роботов или несоблюдение стандартов исключения роботов, изложенных в, строго запрещено.
Что на самом деле означает их запрет на автоматический доступ? Делает ли это автоматический доступ незаконным или просто осуждается?