Добрый вечер, Гость! Представляем Вам наши форумы. Вы можете зарегистрироваться чтобы писать на форумах или зайдите под своим именем, если Вы уже регистрировались.
   
   


Форум
 SX CMS / Техническая помощь
         sys_counter_referer

Похожие темы

sys_counter_referer


События Понедельник, 04.11.2013, 01:42

Vampireos

Группа: Пользователь
Ранг: Продвинутый
Cообщений: 124
Регистрация: 15.05.2012
тоже кстате меня достали)) толпами ходят на пустой мой сайт, и рыщут рыщут всё))
..напомнил мне, такш вместе бум ставить над ними эксперименты Ржу нимагу

вариант первый, наверно самый правильный и лояльный по отношению к ним)
в robots.txt пишем:

User-agent: *
Crawl-delay: 10000
Disallow: /lang/
Disallow: /admin/

10000 это столько секунд, или 160 минут мы приказывает пустоголовым ботам ждать прежде, чем жадно всматриваться в надежде найти обновления на сайте, пусть задумаются над своим поведением Умора

Пользователь офлайн


Похожие темы  |   Предыдущая тема  |   Следующая тема

Быстрый переход:  
 

 Сейчас на сайте

Пользователей: 0, Гостей: 3

Поисковые боты: 148
Bot(117), Mail.Ru Bot(6), oBot(7), BingBot(5), Spider(7), Googlebot(6)
 Статистика форума

  Темы Сообщения Пользователи
За сутки:
За неделю:
За месяц:
Всего:
Мы приветствуем нового участника: wonad81290
 Дни рождения

Сегодня нет именинников
Copyright © 2009 - 2024 SX All rights reserved | Powered by SX CMS 1.06 UTF | Контакты