mail.ru не видит robots.txt

[mAgency]

Кабинет вебмастера — сервис, позволяющий взглянуть на ваш сайт глазами Поиска Mail.Ru

Зарегистрируйтесь на webmaster.mail.ru и проверьте видимость сайта.

[dmstarchikov]

Что то я не очень понимаю как проверить доступность? Сай то я сам в базу добавлял.

[mAgency]

В кабинете веб мастера есть возможность просмотреть сайт как его видит посковый робот. Зайдите в кабинет, там все понятно, проверяйте свой сайт.

[dmstarchikov]

http://webmaster.mail.ru/urldata

Вы про этот адрес? Загнал туда главный url, страница не найдена.

[mAgency]

На первой странице где виден добавленный сайт, если какие-то проблемы с видимостью то это показывает. Например, так

Код: [Выделить]

mysite.ru Страницы сайта помечены тэгом <meta name="robots" content="noindex"/>

[dmstarchikov]

Вы про страницу "Структура сайта". Нет там такого.

[dmstarchikov]

Попробую сейчас скормить ему адрес в punycode а не обычный.

[dmstarchikov]

вебмастер сам превратил его в обычный.

[dmstarchikov]

На другом форуме написали, что вроде как это проблема ip адреса сайта. Но причем тут ip я не понимаю. Достучаться не может?

[coder]

Только если ip в бане.

[dmstarchikov]

Понял. Напишу в техподдержку сайтов.

[dmstarchikov]

Техподдержка сказала, что все чисто.

www.интеллект-технологии.рф   8/11/2016 18:57   32 1   0   0

Данные из вебмастера mail.ru

[dmstarchikov]

Я не много в замешательстве поэтому надеюсь, что здесь админы пойдут на встречу мне. Вопрос такой: как часто поисковик mail.ru бывает на этом сайте? Меня интересует лишь переодичность. Например: раз в две недели. Причина вот в чем: у меня оба сайта по работе индексировались 8 и 10 ноября. Больше mail.ru на них не был. От mail.ru техподдержки приходит "Спасибо, что сообщили, ищем причину". Техподдержка сайтов - говорит, что никаких блокировок и техпроблем нет. Все правила индексации общие. Google и Яндекс уже несколько раз за этот месяц были на сайте. Огромное спасибо.

[Янус]

Частота посещения роботом сайта зависит от нескольких факторов. Обновление, посещения, направление ... Сравнивать свой сайт с этим сайтом бесполезно. Этот форум поисковики могут посещать ежедневно, а ваш сайт раз в месяц. Все зависит от того, что и как вы делаете для оптимизации сайта.

[dmstarchikov]

Прошла индексация сайтов на mail.ru, все равно http://интеллект-технологии.рф/ не скачивается вовсе. Не знаю как быть. http://интеллект-технологии.рф/robots.txt тут вроде все чисто.