Настройки вот такие по-умолчанию. 

 

Несколько раз пробивал чей ip - был MailRu. 

Что не так с настройками?

C настройками всё так, видимо просто не заставал его на форуме.

Несколько раз пробивал чей ip - был MailRu. 

Не факт, что этот Ip принадлежит роботу Mail.Ru. Мало ли какие у них сервисы есть

C настройками всё так, видимо просто не заставал его на форуме.

 

Не факт, что этот Ip принадлежит роботу Mail.Ru. Мало ли какие у них сервисы есть

Он, он. Там подобный сервис как у гугла для вебмастера, я прописал свой сайт,. Заходит с переодичностью день, два. Если уж не он, то хоть один раз за всё время я его должен был увидеть. Там где-то 70 моих страниц в индексе, повторюсь, ни разу его не видел. Яндекс, гугл, очень часто, маил ру нет вообще.

АЦ > Статистика > Журналы > Журнал посещений поисковых ботов

 

Есть там Mail.Ru?

АЦ > Статистика > Журналы > Журнал посещений поисковых ботов

 

Есть там Mail.Ru?

Няма

Только яндекс гугл и бинг

 

Там где 535 это тоже Гугл оказывается 

 

who.is/whois-ip/ip-address/66.249.65.51

 

Из чего следует, что mail.ru вообще не индефицирует

20-го числа заходил бот от маил ру 

 

Поискал тогда причины, нашёл в справке, как отображается он в логах сервера

 

Поисковый робот компании Mail.Ru использует следующие User-Agent:

• Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/2.0; +//go.mail.ru/help/robots)
• Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/Fast/2.0; +//go.mail.ru/help/robots).

 

И соответственно добавил окончание _Bot

 

 

И этот товарищ объявился