Сайт не обходится роботом и отсутствует в поиске Яндекс

Автор Romain, 11 июня 2015, 07:29:27

« назад - далее »

Romain

Добрый день! Сайт уже месяц находится на хостинге и в Яндекс.Вебмастер, но не обходится роботом. Написал в службу поддержки и получил следующий ответ:
"Ваш сайт не обходится роботом и отсутствует в поиске, так как его индексирование полностью запрещено в Вашем файле robots.txt, с помощью правила "Disallow: /". Для того чтобы сайт мог посещаться роботом и принимать участие в поиске, этот запрет необходимо убрать."
При этом на Google индексация медленно, но уверенно происходит. Подскажите пожалуйста, что и где нужно убрать, robots.txt прилагаю.

PrestaMan

Эксперт Prestashop - решения всех проблем, написание модулей, создание тем для интернет-магазинов под Prestashop.
Эксперт Magento - создам сайт на Magento, программирование кастомных модулей для Magento, кастомизация тем Magento.
Лучшие цены!!!

Romain

Своими неширокими познаниями в этой области, не могу понять. Помогите истолковать и исправить ошибки robots.txt, на которые указывает Яндекс при проверке:

   
79-80   Sitemap: http://intrend.in.ua/1_index_sitemap.xml
                User-agent: Yandex

82-123   Disallow: /*?orderby=
                Disallow: /*?orderway=
                ...
                Disallow: /*controller=guest-tracking

125-131   Disallow: */classes/
                Disallow: */config/
                ...
                Disallow: */tools/

133-148   Disallow: /address
                Disallow: /addresses
                ...
                Disallow: /search

150-151   Allow: /1_index_sitemap.xml
                Sitemap: http://intrend.in.ua/1_index_sitemap.xml

Янус

Удалите повторяющиеся директивы. Знак вопроса не нужен. Для контроллеров используйье "*controller=" Указываете правлила на запрещение, разрешения не используйте. В конце файла указываете карту сайта

Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*controller=addresses
Disallow: /*controller=address
Host: хххххх
Sitemap: http://хххххх/1_index_sitemap.xml
Поисковая оптимизация, SEO  оптимизация сайтов, интенет-магазинов.  Работа на результат –  вывод в топ, увеличение посещяемости и увеличение продаж.

Romain

Цитата: Янус от 11 июня 2015, 09:30:42
Удалите повторяющиеся директивы. Знак вопроса не нужен. Для контроллеров используйье "*controller=" Указываете правлила на запрещение, разрешения не используйте. В конце файла указываете карту сайта

Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*controller=addresses
Disallow: /*controller=address
Host: хххххх
Sitemap: http://хххххх/1_index_sitemap.xml


Спасибо Вам большое, за не в первый раз, подробные ответы!!!

Romain

Цитата: Янус от 11 июня 2015, 09:30:42
Удалите повторяющиеся директивы. Знак вопроса не нужен. Для контроллеров используйье "*controller=" Указываете правлила на запрещение, разрешения не используйте. В конце файла указываете карту сайта

Скажите пожалуйста, такое содержание должно быть?
User-agent: *
# Private pages
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*tag=
Disallow: /*id_currency=
Disallow: /*search_query=
Disallow: /*back=
Disallow: /*n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=discount
Disallow: /*controller=footer
Disallow: /*controller=get-file
Disallow: /*controller=header
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=images.inc
Disallow: /*controller=init
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-opc
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories
Disallow: */classes/
Disallow: */config/
Disallow: */download/
Disallow: */mails/
Disallow: */modules/
Disallow: */translations/
Disallow: */tools/
# Files
Disallow: /address
Disallow: /addresses
Disallow: /authentication
Disallow: /cart
Disallow: /discount
Disallow: /guest-tracking
Disallow: /order-history
Disallow: /identity
Disallow: /my-account
Disallow: /order
Disallow: /
Disallow: /order-follow
Disallow: /quick-order
Disallow: /order-slip
Disallow: /password-recovery
Disallow: /search
Host: ххххххх
Sitemap: http://ххххххх/1_index_sitemap.xml


И еще, что за строка Disallow: / в дирректории # Files, что она запрещает?

tigran


Romain

Цитата: tigran от 11 июня 2015, 12:37:25
Disallow: /
запрет индексирования всего сайта.
Спасибо большущее за полезную подсказку, отсюда и все проблемы с индексацией?
Скажите еще, а что запрещает индексировать это: Disallow: /*n=

kvestin80


Romain