Цитата(Capitan Blood @ 4.8.2014, 9:27)
так как вижу что в данном аспкете у меня меньше компетенция
Что для программиста такого уровня вызывает сложность задание индивидуальной настройки для сервера в ситуации, когда боты тратят трафик, а взамен ничего не дают, я поверю, но поверю один раз
Код
<Limit GET POST>
order allow,deny
deny from 198.20.66.122
deny from 38.111.147.83
deny from 91.109.19.34
deny from 108.59.8.70
deny from 178.24.223.177
deny from 148.251.51.240
deny from 87.117.204.9
allow from all
</Limit>
Этот код блокировки на аппаратном уровне для пяти наших сайтов, в файле
.htaccess, который лежит в корневой папке "
/http/"
Цитата(Capitan Blood @ 3.8.2014, 6:31)
но этим то что здесь надо?
Одни боты создаются для создания списка сайтов которые не содержат детскую порнографию, так по крайне мере в Германии, другие для учебных целей
Цитата(Capitan Blood @ 4.8.2014, 9:27)
ваше мнение, что с этим делать
Можно было бы закрыть сайты от ботов файлами robots.txt, которые автоматически без нашего участия блокировали бы всех ботов, при этом оставляя их открытыми для Яндекса и Гугла, но после того как Google официально заявил, что robots.txt является рекомендацией, а не указанием, как поступать роботу и порекомендовал закрывать паролем страницы которые не должны быть в поиске, я этот способ даже не рассматриваю