Добрый вечер, Гость! Представляем Вам наши форумы. Вы можете зарегистрироваться чтобы писать на форумах или зайдите под своим именем, если Вы уже регистрировались.
   
   


Форум
 CMS Status-X | Техническая помощь
         sys_counter_referer

Похожие темы  |  Печать страницы

sys_counter_referer


События Понедельник, 04.11.2013, 01:42

Anus

Группа: Пользователь
Ранг: Продвинутый
Cообщений: 147
Регистрация: 15.05.2012
тоже кстате меня достали)) толпами ходят на пустой мой сайт, и рыщут рыщут всё))
..напомнил мне, такш вместе бум ставить над ними эксперименты Ржу нимагу

вариант первый, наверно самый правильный и лояльный по отношению к ним)
в robots.txt пишем:

User-agent: *
Crawl-delay: 10000
Disallow: /lang/
Disallow: /admin/

10000 это столько секунд, или 160 минут мы приказывает пустоголовым ботам ждать прежде, чем жадно всматриваться в надежде найти обновления на сайте, пусть задумаются над своим поведением Умора

Пользователь офлайн


Похожие темы  |  Печать страницы  |   Предыдущая тема  |   Следующая тема

Быстрый переход:  
 

 Сейчас на сайте


Пользователей: 0, Гостей: 7

Поисковые боты: 5
Googlebot(3), Inktomi Slurp, Unknown Bot

 Статистика форума


  Темы Сообщения Пользователи
За сутки:
За неделю:
За месяц:
Всего:
Мы приветствуем нового участника: intuix

 Дни рождения


danneoxy (36), Virtuose (35), данил (17)
Печать | Copyright © 2009 - 2016 Status-X All rights reserved | Powered by CMS Status-X 1.05 | Контакты