Всем доброго дня! Второй день разбираюсь с файлом роботс.тхт
Нашла файл, который вроде был одобрен гуру на этом форуме, но чет душа не спокойна...вот сам файл
User-agent: *
# Private pages
Disallow: /*orderby=
Disallow: /*orderway=
Disallow: /*tag=
Disallow: /*id_currency=
Disallow: /*search_query=
Disallow: /*back=
Disallow: /*n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=get-file
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-opc
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories
Disallow: */classes/
Disallow: */config/
Disallow: */download/
Disallow: */mails/
Disallow: */modules/
Disallow: */translations/
Disallow: */tools/
# Files
Disallow: /*ru/address
Disallow: /*ru/addresses
Disallow: /*ru/authentication
Disallow: /*ru/cart
Disallow: /*ru/guest-tracking
Disallow: /*ru/order-history
Disallow: /*ru/identity
Disallow: /*ru/my-account
Disallow: /*ru/order
Disallow: /*ru/order-follow
Disallow: /*ru/quick-order
Disallow: /*ru/order-slip
Disallow: /*ru/password-recovery
Disallow: /*ru/search
Disallow: /*en/address
Disallow: /*en/addresses
Disallow: /*en/authentication
Disallow: /*en/cart
Disallow: /*en/guest-tracking
Disallow: /*en/order-history
Disallow: /*en/identity
Disallow: /*en/my-account
Disallow: /*en/order
Disallow: /*en/order-follow
Disallow: /*en/quick-order
Disallow: /*en/order-slip
Disallow: /*en/password-recovery
Disallow: /*en/search
Host: shop.veresk-sm.ru
Sitemap: http://shop.veresk-sm.ru/1_index_sitemap.xml
вдоль и поперек прочитала руководство по вэбмастеру и роботсу там же....
вопрос 1. где почитать о тома как перевести каждую строчку? например что значит это "*tag=" где об этом подробнее почитать (к слову на форуме прочитала что только можно)...чисто логически понимаю, что часть строчек - это части нечеловекопонятных урлов. но что же каждый урл проверять вручную?....боже как во всем этом разобраться....боги помогите!!!! Только не объясняйте что такое disallow - понятно что это запрет к индексации...не понятны остальные части строчек...например запрет к индексации *tag=" - это запрет к индексации тегов? или как это понимать? и разве их нужно закрывать от индексации? зачем тогда мы кругом прописываем тэги? "Disallow: */modules/" зачем надо закрывать от индексации модули??? или вот эта строка "Disallow: /*n=" вычитала что это запрет постраничной навигации...где об этом почитать? "*n=" - это вот откуда??? где написано, что n - это постранично? а как еще можно, если не постранично???
вопрос 2. нужно ли менять файл всякий раз после изменений на сайте, этот же вопрос и к сайт мэп относится, нужно ли генерировать новую карту сайта и как часто?
Всем заранее огромное спасибо, очень надеюсь на подробные ответы для дурака...