Перейти к содержимому

MOAB

- - - - -

Регулярка для бота Mail.ru


  • Войдите, чтобы ответить
Сообщений в теме: 4

#1 Sonya*

Sonya*

    Школьница - Фея

  • Старая гвардия
  • PipPipPipPipPip
  • 1 586 сообщений
1 056
  • Из(GMT + 1:00)

Отправлено 25 Декабрь 2012 - 23:18

Нужна регулярка для логов. Бот должен представляться вот так:
http://help.mail.ru/...obots/robot_log

Вопрос: так я первого ловлю или нет? А второго? А вместе обоих? :blush:
Mail\.RU_Bot[ /]([0-9.]{1,10})

Update: Можно удалять. Первого поймала... Второй не ловится этим regex
"Щоб не плакать, я сміялась" ©
ban.png124922.png

#2 No Name

No Name

    No Rank

  • Основатель
  • PipPipPipPipPip
  • 2 688 сообщений
1 525
  • ИзДефолтситевск

Отправлено 26 Декабрь 2012 - 00:19

Я открою тебе черную магию. Когда мне надо отловить чьих-то ботов, то я просто качаю свежие исходники awstats и смотрю, чем ловят их там. Мэйл ру они, кстати, ловят просто 'mail\.ru' :)
Clever never made no one rich, it doesn't appeal to the teenage market.

#3 Sonya*

Sonya*

    Школьница - Фея

  • Старая гвардия
  • PipPipPipPipPip
  • 1 586 сообщений
1 056
  • Из(GMT + 1:00)

TC Отправлено 26 Декабрь 2012 - 00:25

Просмотр сообщенияNo Name сказал:

ловят просто 'mail\.ru'
А на этом форуме бот стоит в User Agent? Я никогда его не видела в списке пользователей внизу. Нет User Agent? Или не ходит? Или ходит, но редко? ;)

И еще вот это чудо http://internet.mail.ru/ как представляется? Кто-нибудь знает? Там нет случаем mail.ru в User Agent тоже?

О, боже, там еще один есть http://amigo.mail.ru/ Сколько их там? :o
"Щоб не плакать, я сміялась" ©
ban.png124922.png

#4 No Name

No Name

    No Rank

  • Основатель
  • PipPipPipPipPip
  • 2 688 сообщений
1 525
  • ИзДефолтситевск

Отправлено 26 Декабрь 2012 - 00:42

Извращенцы.

У нас в UA не стоит. Бот ходит.

На счет UA их браузеров тоже можно awstats покурить.
Clever never made no one rich, it doesn't appeal to the teenage market.

#5 Sonya*

Sonya*

    Школьница - Фея

  • Старая гвардия
  • PipPipPipPipPip
  • 1 586 сообщений
1 056
  • Из(GMT + 1:00)

TC Отправлено 26 Декабрь 2012 - 00:52

Просмотр сообщенияNo Name сказал:

У нас в UA не стоит. Бот ходит.
Бота отловила. Подозрение подтвердилось. Кладет он на robots.txt, просто откровенно кладет. Смешной такой, бегает и на данный момент на 99% в 401 ошибки тыкается. Как слепой котенок... Мне даже чего-то жалко его стало :D
"Щоб не плакать, я сміялась" ©
ban.png124922.png



Похожие темы


Количество пользователей, читающих эту тему: 0

0 пользователей, 0 гостей, 0 анонимных



© 2017 SMO&SEO форум «WEBIMHO» — продвижение и создание сайтов, интернет-маркетинг

По вопросам рекламы на форуме и цены на рекламу
Все материалы SEO форума разрешены к копированию только с установкой гиперактивной ссылки на webimho.ru,
тем, кто этого не сделает, мы оторвем руки и ноги и поменяем местами,
а когда выйдем из тюрьмы, опять оторвем и опять поменяем.


Россия, г. Москва

Мы в соцсетях: twitter | вконтакте | facebook | livejournal