Боты портят rank тумб

Наша копилка знаний

Модераторы: dushik, Slim

Ответить
Fingers
Сообщения: 7
Зарегистрирован: Ср фев 18, 2015 7:49 am

Боты портят rank тумб

Сообщение Fingers » Чт авг 01, 2019 10:05 am

Можно что-то придумать против большого количества ботов-спайдеров которые портят rank тумб?
Ситуация следующая, на сайте довольно большой объем контента, и конечно на такой объем всегда приходит много ботов что бы просканить его, но от того количества очень сильно снижается rank максимум что показывает по хорошей тумбе это 0.443***% если на обычном cj это около 3.000***% на тех же тумбах. Спайдеров в сутки бывает до 50.000, банить нет смысла так как много поисковых google и прочих поисковых. Может есть возможность сделать что то вроде с одного ip можно только определенное количество view сделать например поставить 500, а дальше не обсчитывать, типа считать уже не уникальным и игнорировать. А то получается что из того что боты не кликают они просто накручивают view.

Аватара пользователя
dushik
Admin
Сообщения: 2155
Зарегистрирован: Вс сен 03, 2006 4:51 pm

Re: Боты портят rank тумб

Сообщение dushik » Чт авг 01, 2019 12:15 pm

попробуй включить это viewtopic.php?p=6902#p6902
это очень полезная фича, сам пользуюсь

Fingers
Сообщения: 7
Зарегистрирован: Ср фев 18, 2015 7:49 am

Re: Боты портят rank тумб

Сообщение Fingers » Чт авг 01, 2019 5:45 pm

пробовал, банит, но банит ботов которые с Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) это не есть хорошо, если банить гугл то какой потом можно ждать SE траф, если не даешь ботам выполнить свои обязанности по сбору инфы, нужна золотая середина :)

Аватара пользователя
dushik
Admin
Сообщения: 2155
Зарегистрирован: Вс сен 03, 2006 4:51 pm

Re: Боты портят rank тумб

Сообщение dushik » Пт авг 02, 2019 4:22 pm

скрипт проверяет, настоящий ли это google bot или нет, там все хорошо )

Ответить