Не можу зрозуміти, в чому проблема. Меіл.ру чомусь "не може встановити з'єднання ...".
Гугл і Яндекс прекрасно індексують всі мої сайти з такою помилкою. Robots.txt перевірив, заборон на індексацію немає.
Сам Меіл.ру пише наступне (див. Другий скріншот):
Проблема може бути не тільки в Robots.txt.Ваш хостер може блокувати доступ сервера, що по всій видимості і відбувається. Зазвичай це відбувається, коли у індексуючему робота ПС змінюється ip або криві руки у адміна хостингу який при зміні або оновленні ПЗ зробив неправильні настройки. У мене так було з Яндексом. Щоб виправити спочатку пишете в техпідтримку mail.ru і повідомляєте про проблему. Заодно запитаєте ip індексуючему робота, якого закритий доступ. Потім пишете своєму хостера з вимогою припинити блокування та ip вказуєте. Вони швидше за все будуть відмовлятися, але поправлять. Далі чекайте тижні 2-3 поки переіндексіруется.
Залишити відповідь