Автор Тема: Ребята кто знает что нибудь по robots.txt ???  (Прочитано 974 раз)

28 Ноября 2014, 22:46:07
  • Новичок
  • *
  • Сообщений: 8
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
Сразу говорю вопрос от чайника который только постигает базовые знания по оптимизации))))так что строго не судите.

Короче хочу запустить интернет магазин для взрослых....вот сайт www.valkyriya.ru,но вот после индексации в гугл попало столько мусора это можно увидеть в выдаче.Попали в гугл производители товаров и прочая не нужная инфа, в индексе Яндекса только главная. И то под заголовком в выдаче какая то фигня про корзину выходит, про доступные товары,сколько товаров в корзине.

Как я понимаю если я хочу закрыть от индекса корзину мне нужно ввести такую команду в роботс :Disallow: */shopping_cart/ и куда запихнуть это всё что хочу закрыть от индекса в # Private pages или # Directories.

И что вообще означает controller в команде Disallow: /*controller=history . То что это переводиться как контролер это понятно)но,что он там контролит)))))



Робот сам выглядит стандартно:
# robots.txt automaticaly generated by PrestaShop e-commerce open-source solution
# http://www.prestashop.com - http://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/wc/robots.html
User-agent: *
# Private pages
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*tag=
Disallow: /*id_currency=
Disallow: /*search_query=
Disallow: /*back=
Disallow: /*n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=discount
Disallow: /*controller=footer
Disallow: /*controller=get-file
Disallow: /*controller=header
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=images.inc
Disallow: /*controller=init
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-opc
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories
Disallow: */classes/
Disallow: */config/
Disallow: */download/
Disallow: */mails/
Disallow: */modules/
Disallow: */translations/
Disallow: */tools/
29 Ноября 2014, 12:24:59
Ответ #1
  • Партнер
  • Фрилансер
  • ****
  • Сообщений: 230
  • Репутация: +11/-0
  • SEO оптимизация сайтов, интенет-магазинов.
    • Просмотр профиля
Disallow: /*controller=historyЗапрет к страницам личного кабина, это страница сделанных заказов.
Disallow: /*controller=orderЭто запрет к странице шагов оформления заказа, в том числе к первому шагу - корзине.

То что в гугуль попало много мусора виноват модуль Карта сайта. В нем нужно было отметить страницы, которые вы хотитете отключить - проихводителей, корзину ... Перегенерируйте карту сайта.
Поисковая оптимизация, SEO  оптимизация сайтов, интенет-магазинов.  Работа на результат –  вывод в топ, увеличение посещяемости и увеличение продаж.
29 Ноября 2014, 12:34:25
Ответ #2
  • Модератор
  • Ветеран
  • *****
  • Сообщений: 884
  • Репутация: +206/-0
    • Просмотр профиля
01 Декабря 2014, 22:19:27
Ответ #3
  • Новичок
  • *
  • Сообщений: 8
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
Disallow: /*controller=historyЗапрет к страницам личного кабина, это страница сделанных заказов.
Disallow: /*controller=orderЭто запрет к странице шагов оформления заказа, в том числе к первому шагу - корзине.

То что в гугуль попало много мусора виноват модуль Карта сайта. В нем нужно было отметить страницы, которые вы хотитете отключить - проихводителей, корзину ... Перегенерируйте карту сайта.

Спасибо за ответ)уже перегенерил)
01 Декабря 2014, 22:19:59
Ответ #4
  • Новичок
  • *
  • Сообщений: 8
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля