Доброй ночи, Гость! Представляем Вам наши форумы. Вы можете зарегистрироваться чтобы писать на форумах или зайдите под своим именем, если Вы уже регистрировались.
   
   


Форум
 SX CMS | Техническая помощь
         sys_counter_referer

Похожие темы  |  Печать страницы

sys_counter_referer


События Понедельник, 04.11.2013, 01:42

Anus

Группа: Пользователь
Ранг: Продвинутый
Cообщений: 124
Регистрация: 15.05.2012
тоже кстате меня достали)) толпами ходят на пустой мой сайт, и рыщут рыщут всё))
..напомнил мне, такш вместе бум ставить над ними эксперименты Ржу нимагу

вариант первый, наверно самый правильный и лояльный по отношению к ним)
в robots.txt пишем:

User-agent: *
Crawl-delay: 10000
Disallow: /lang/
Disallow: /admin/

10000 это столько секунд, или 160 минут мы приказывает пустоголовым ботам ждать прежде, чем жадно всматриваться в надежде найти обновления на сайте, пусть задумаются над своим поведением Умора

Пользователь офлайн


Похожие темы  |  Печать страницы  |   Предыдущая тема  |   Следующая тема

Быстрый переход:  
 

 Сейчас на сайте

Пользователей: 0, Гостей: 2

Поисковые боты: 38
oBot(17), Bot(16), Crawler, Yandex(2), Googlebot, Inktomi Slurp
 Статистика форума

  Темы Сообщения Пользователи
За сутки:
За неделю:
За месяц:
Всего:
Мы приветствуем нового участника: Roostoos1
 Дни рождения

AHostVN (48), prosto___art (30)
Печать | Copyright © 2009 - 2017 SX All rights reserved | Powered by SX CMS 1.05 | Контакты