Автор Тема: Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.  (Прочитано 795 раз)

02 Февраль 2016, 11:41:35
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

Это мне пишет гугл вэбматер.

вот так выглядит моя проблема (картинка 1)
очень много чего прочитал на форуме, но для себя полезного не нашел, наверно чайник просто и многие термены мне не знакомы. Если кому не трудно, объясните простым языком, буду благодарен.
02 Февраль 2016, 11:46:27
Ответ #1
  • Модератор
  • Ветеран
  • *****
  • Сообщений: 86688
  • Репутация: +25428/-0
  • Сообщество PrestaShop
    • Просмотр профиля
У вас сайт (немецкая версия) запрещен для индексирования поисковиком.
Не знаете терминов, так просто сравните файлы, что выкладывают на форуме со своим файлом.
02 Февраль 2016, 11:50:39
Ответ #2
  • Ветеран
  • *****
  • Сообщений: 3419
  • Репутация: +79/-6
  • Сообщество PrestaShop
    • Просмотр профиля
Disallow: /*deЭто кто тебе посоветывал закрыть сайт?
Или тебе не нужно чтобы в google был сайт на немецком?
02 Февраль 2016, 11:54:29
Ответ #3
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
У вас сайт (немецкая версия) запрещен для индексирования поисковиком.
Не знаете терминов, так просто сравните файлы, что выкладывают на форуме со своим файлом.

Ничего не понимаю. В престашоп у меня язык по умолчанию русский. Сам сайт я сделал на двух языках: русский и немецкий.
А что я должен сравнивать с файлами я не пойму. Не, конечно если бы я знал что искать или что сравнивать. Ну а так я читаю, читаю, а ответ на свой вопрос я не нашел или просто не вижу.
 :(
02 Февраль 2016, 11:58:18
Ответ #4
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
Disallow: /*deЭто кто тебе посоветывал закрыть сайт?
Или тебе не нужно чтобы в google был сайт на немецком?

Микол, я вот создал (картинка 1)
Потом вставил в (картинка 2)

И вот результат.
А что там написано и как это изменить, ну тут я вообще дурак. не знаю.
02 Февраль 2016, 12:02:36
Ответ #5
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
Disallow: /*deЭто кто тебе посоветывал закрыть сайт?
Или тебе не нужно чтобы в google был сайт на немецком?

МОЖЕТ Я ЧТО то в НАСТРОЙКАХ престашоп не так настроил.
Кто подскажет, на что нужно обратить внимание???
 :'(
02 Февраль 2016, 12:03:10
Ответ #6
  • Ветеран
  • *****
  • Сообщений: 3419
  • Репутация: +79/-6
  • Сообщество PrestaShop
    • Просмотр профиля
Закрытие языковых версий не настраивается в sitemap. Модуль карты идет отдельно от создания robots.txt. Ты хоть все закрой в карте сайта, а в robots.txt ничего не изменится.
Тебе лучше оптимизатора нанять, если ничего не знаешь.
02 Февраль 2016, 12:05:22
Ответ #7
  • Ветеран
  • *****
  • Сообщений: 3419
  • Репутация: +79/-6
  • Сообщество PrestaShop
    • Просмотр профиля
Нельзя в настройках престы сделать так, чтобы в robots.txt было
Disallow: /*deэто ты в ручную сам добавил или кто-то, кто имеет доступ к файлам.
02 Февраль 2016, 12:17:48
Ответ #8
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
Нельзя в настройках престы сделать так, чтобы в robots.txt было
Disallow: /*deэто ты в ручную сам добавил или кто-то, кто имеет доступ к файлам.

Все понятно, но и ничего не понятно.
Где искать оптимизатора?
Сколько такое удовольствие будет стоить?
И нужен ли мне оптимизатор каждый раз, если я переодически буду обновлять sitemap.xml, так как в дальнейшем также буду добавлять товар?
02 Февраль 2016, 12:29:55
Ответ #9
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии
Вот так у меня выглядит текст, который я скопировал в файле "robots.txt". Данный файл загружен на моем сервере. Теперь я понимаю, что тут некоторые вещи не правильно, но КТО подскажет как их исправить. Можно ли что то удалить или необходимо что то добавить? Есть ли какой либо стандарт как должен выглядеть этот текст???
# robots.txt automaticaly generated by PrestaShop e-commerce open-source solution
# http://www.prestashop.com - http://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/robotstxt.html
User-agent: *
# Allow Directives
Allow: */modules/*.css
Allow: */modules/*.js
# Private pages
Disallow: /*?orderby=
Disallow: /*?orderway=
Disallow: /*?tag=
Disallow: /*?id_currency=
Disallow: /*?search_query=
Disallow: /*?back=
Disallow: /*?n=
Disallow: /*&orderby=
Disallow: /*&orderway=
Disallow: /*&tag=
Disallow: /*&id_currency=
Disallow: /*&search_query=
Disallow: /*&back=
Disallow: /*&n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=discount
Disallow: /*controller=footer
Disallow: /*controller=get-file
Disallow: /*controller=header
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=images.inc
Disallow: /*controller=init
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-opc
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories
Disallow: */classes/
Disallow: */config/
Disallow: */download/
Disallow: */mails/
Disallow: */modules/
Disallow: */translations/
Disallow: */tools/
# Files
Disallow: /*ru/address
Disallow: /*ru/addresses
Disallow: /*ru/authentication
Disallow: /*ru/cart
Disallow: /*ru/discount
Disallow: /*ru/guest-tracking
Disallow: /*ru/order-history
Disallow: /*ru/identity
Disallow: /*ru/my-account
Disallow: /*ru/order
Disallow: /*ru/
Disallow: /*ru/order-follow
Disallow: /*ru/quick-order
Disallow: /*ru/order-slip
Disallow: /*ru/password-recovery
Disallow: /*ru/search
Disallow: /*de/address
Disallow: /*de/addresses
Disallow: /*de/authentication
Disallow: /*de/cart
Disallow: /*de/discount
Disallow: /*de/guest-tracking
Disallow: /*de/order-history
Disallow: /*de/identity
Disallow: /*de/my-account
Disallow: /*de/order
Disallow: /*de/
Disallow: /*de/order-follow
Disallow: /*de/quick-order
Disallow: /*de/order-slip
Disallow: /*de/password-recovery
Disallow: /*de/search
# Sitemap
Sitemap: http://kupitjfoto.com/1_index_sitemap.xml
02 Февраль 2016, 12:38:48
Ответ #10
  • Ветеран
  • *****
  • Сообщений: 3419
  • Репутация: +79/-6
  • Сообщество PrestaShop
    • Просмотр профиля
Все понятно, но и ничего не понятно.
Где искать оптимизатора?
Сколько такое удовольствие будет стоить?
И нужен ли мне оптимизатор каждый раз, если я переодически буду обновлять sitemap.xml, так как в дальнейшем также буду добавлять товар?
sitemap и так обновляется по расписанию, ежедневно или раз в неделю, месяц. В модуле в самом верху настроек есть выбор периода обновления sitemap.
Оптимизатор один раз настроит и до слежующего обновления prestashop все будет работать. После обновения нужно опять проверять.
 
02 Февраль 2016, 12:43:01
Ответ #11
  • Ветеран
  • *****
  • Сообщений: 885
  • Репутация: +206/-0
    • Просмотр профиля
Цитировать
Можно ли что то удалить или необходимо что то добавить? Есть ли какой либо стандарт как должен выглядеть этот текст???
Вы ссылки смотрите, что вам дают?
По сто раз писать одно и тоже никто не будет.

http://prestashop-forum.ru/index.php/topic,429.msg2068.html
http://prestashop-forum.ru/index.php/topic,1632.msg8192.html
http://prestashop-forum.ru/index.php/topic,3021.msg16985.html
и еще много много постов на эту тему - Sitemap и robots.txt в prestashop.
02 Февраль 2016, 12:53:00
Ответ #12
  • Модератор
  • Ветеран
  • *****
  • Сообщений: 86688
  • Репутация: +25428/-0
  • Сообщество PrestaShop
    • Просмотр профиля
02 Февраль 2016, 14:17:44
Ответ #13
  • Пользователь
  • **
  • Сообщений: 70
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • Скачать Купить Фотографии