1

Тема: BotDetect v1.5

Установил мод.
Но не очень понял настройки. С английским не разобрался.
Кто-нить пользует?

Кто знает Bot UserAgent String
Я бы хотел на яндекс и рамблер поставить.

У каждого свой взгляд на мир.

Сайт coordinator

Поделиться

2

Re: BotDetect v1.5

дай скриншот или ссылку что ли wink

"Мнение большинства не является критерием истины."

Сайт SDTux

Поделиться

3

Re: BotDetect v1.5

Вот проект на пунресе:
www.punres.org/desc.php?pid=147

У каждого свой взгляд на мир.

Сайт coordinator

Поделиться

4 (08.10.2006 17:33 отредактировано Xbons)

Re: BotDetect v1.5

Поставил, использую, все работает.

Там где:

User Agent String Settings
Bot Detection

Нужно поставить галочки.

Списки ботов:

Большой список:
www.robotstxt.org/wc/active/html/index.html
damagelab.org/index.php?s=902aeb … opic=11801

Популярные:

Yandex=Yandex Crawler Bot
StackRambler=Rambler Crawler Bot
msnbot=MSN Bot
googlebot=Google.com Bot
slurp@inktomi=Hot Bot
ask jeeves=Ask Jeeves Bot
lycos=Lycos.com Bot
whatuseek=What You Seek Bot
ia_archiver=Archive.org Bot
+
WebAlta=WebAlta Crawler/1.3.11

Хотел еще предупредить: много ботов( 100 штук например) не вписывайте, грузит сервер.

Поделиться

5

Re: BotDetect v1.5

Xbons пишет:

Yandex=Yandex Crawler Bot

Или тут инфа к черту устарела или я ничего не понимаю.
Взял с webmaster.yandex.ru/

У Яндекса есть несколько роботов, которые представляются по-разному.
Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова»
YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса

IP-адресов, с которых «ходит» робот Яндекса, много, и они могут меняться. Список адресов мы не разглашаем.

Кроме роботов у Яндекса есть несколько агентов-«простукивалок», которые определяют, доступен ли в данный момент сайт или документ, на который стоит ссылка в соответствующем сервисе.
Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.
Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.
Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукивалка» Яндекс.Новостей. Она формирует отчет для контент-менеджера, который оценивает масштаб проблем и, при необходимости, связывается с партнером.

С гуглен таже песня...
И что добовлять?

Сайт FedKoFF

Поделиться

6

Re: BotDetect v1.5

FedKoFF
А у тебя вооще работает этот мод?
У меня на 1.2.14 вообще ноль реакции...
Хотя точно известо что Гугль ходит (его IP), но ничего не рулит. Такое ощущение, что мод уже устарел...

No Money, No Time, No Girl, No Job - NO PROBLEM!

Поделиться

7

Re: BotDetect v1.5

Работает это точно.
Дабовлял гугла и он виднелся в статистике.
Но машин то несколько от того же гугла или нет.
Кто просветит, то я невъезжаю.

Сайт FedKoFF

Поделиться

8

Re: BotDetect v1.5

Странно, у меня только юзеров всё равно показывает. Роботов не высвечивает.
Ладно, подожду, может ещё покажутся.
Если нет то снесу мод smile он особо не нужен, мучиться из-за него.

Добавлено  02.14.2007 19:02:41:
Ну наконец-то!
Появился Гугль.
Причём прописан был много разными вариантами, а сработал только на этом варианте "google", причём только с маленькой буквы.

No Money, No Time, No Girl, No Job - NO PROBLEM!

Поделиться

9

Re: BotDetect v1.5

Вобщем сегодня целый день изучал функциональность этого модуля и пришёл к выводу что он практически бесполезен.
Ловит только процентов так 10 разных ботов, остальных просто игнорирует.
Надо сносить...

No Money, No Time, No Girl, No Job - NO PROBLEM!

Поделиться

10

Re: BotDetect v1.5

FedKoFF пишет:

Но машин то несколько от того же гугла или нет.
Кто просветит, то я невъезжаю.

Серверов у их действительно больше, чем... чем... не с чем даже сравнивать. big_smile

Просто у ботов есть разные идентификаторы, в том числе бот может ходить и из под браузера. Всё это отлично отображается в серверной статистике.

Поделиться

11

Re: BotDetect v1.5

За несколько часов я чё-то не заметил, чтобы отображался хоть один бот... Хотя гугл ходит... видно по ИП

Поделиться

12 (27.05.2008 06:43 отредактировано FedKoFF)

Re: BotDetect v1.5

Прошло время.
Вот кого и как я наловил.

[Bot] Yahoo!  ->   Yahoo!
[Bot] MSN  ->  msnbot
[Bot] Yandex   -> Yandex
[Bot] Google  ->  google
[Bot] Google  ->  Google

Добавлено спустя     11 минут   11 секунд:
Да забыл написать...
"Ловушку" для ботов, а именно строку:

require(PUN_ROOT.'botdetect.php');
    $botStatus = isBotOnline();

Надо запихать в header.php, чтоб она на каждой странице их вычисляла, на по реадми к моду её только на index.php надо добавлять и получается тогда, что они "ловятся" только на главной.

Сайт FedKoFF

Поделиться

13

Re: BotDetect v1.5

FedKoFF пишет:

Да забыл написать...
"Ловушку" для ботов, а именно строку:

Надо запихать в header.php, чтоб она на каждой странице их вычисляла, на по реадми к моду её только на index.php надо добавлять и получается тогда, что они "ловятся" только на главной

Куда конкретно?

Поделиться