Автор Тема: robots не отображается  (Прочитано 362 раз)

09 Июля 2015, 15:53:17
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Привет, друзья.
Такая беда: при обращении к роботс типа site.ru/robots.txt - выдает 404 ошибку
Хотя захожу в папки - он лежит. Также попробовал изменить его название на robots1.txt - он открылся в браузере.
Возможно причина в файле .htaccess, т к недавно переезжал на новый домен и прописывал там редирект, но особо в командах этого файла не разбираюсь.

Может кто глянет, поможет решить проблему, вот что в .htaccesse:

<IfModule mod_rewrite.c>
<IfModule mod_env.c>
SetEnv HTTP_MOD_REWRITE On
</IfModule>

RewriteEngine on
RewriteRule . - [E=REWRITEBASE:/]
RewriteRule ^api/?(.*)$ %{ENV:REWRITEBASE}webservice/dispatcher.php?url=$1 [QSA,L]

# Images
RewriteRule ^([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$1$2$3.jpg [L]
RewriteRule ^([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$1$2$3$4.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$1$2$3$4$5.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$4/$1$2$3$4$5$6.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$4/$5/$1$2$3$4$5$6$7.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$4/$5/$6/$1$2$3$4$5$6$7$8.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$4/$5/$6/$7/$1$2$3$4$5$6$7$8$9.jpg [L]
RewriteRule ^([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])([0-9])(\-[_a-zA-Z0-9-]*)?(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/p/$1/$2/$3/$4/$5/$6/$7/$8/$1$2$3$4$5$6$7$8$9$10.jpg [L]
RewriteRule ^c/([0-9]+)(\-[\.*_a-zA-Z0-9-]*)(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/c/$1$2$3.jpg [L]
RewriteRule ^c/([a-zA-Z_-]+)(-[0-9]+)?/.+\.jpg$ %{ENV:REWRITEBASE}img/c/$1$2.jpg [L]
# AlphaImageLoader for IE and fancybox
RewriteRule ^images_ie/?([^/]+)\.(jpe?g|png|gif)$ js/jquery/plugins/fancybox/images/$1.$2 [L]

# Dispatcher
RewriteCond %{REQUEST_FILENAME} -s [OR]
RewriteCond %{REQUEST_FILENAME} -l [OR]
RewriteCond %{REQUEST_FILENAME} -d
RewriteRule ^.*$ - [NC,L]
RewriteRule ^.*$ %{ENV:REWRITEBASE}index.php [NC,L]
</IfModule>

AddType application/vnd.ms-fontobject .eot
AddType font/ttf .ttf
AddType font/otf .otf
AddType application/x-font-woff .woff

<IfModule mod_expires.c>
ExpiresActive On
ExpiresByType image/gif "access plus 1 month"
ExpiresByType image/jpeg "access plus 1 month"
ExpiresByType image/png "access plus 1 month"
ExpiresByType text/css "access plus 1 week"
ExpiresByType text/javascript "access plus 1 week"
ExpiresByType application/javascript "access plus 1 week"
ExpiresByType application/x-javascript "access plus 1 week"
ExpiresByType image/x-icon "access plus 1 year"
ExpiresByType image/svg+xml "access plus 1 year"
ExpiresByType image/vnd.microsoft.icon "access plus 1 year"
ExpiresByType application/font-woff "access plus 1 year"
ExpiresByType application/x-font-woff "access plus 1 year"
ExpiresByType application/vnd.ms-fontobject "access plus 1 year"
ExpiresByType font/opentype "access plus 1 year"
ExpiresByType font/ttf "access plus 1 year"
ExpiresByType font/otf "access plus 1 year"
ExpiresByType application/x-font-ttf "access plus 1 year"
ExpiresByType application/x-font-otf "access plus 1 year"
</IfModule>

FileETag INode MTime Size
<IfModule mod_deflate.c>
<IfModule mod_filter.c>
AddOutputFilterByType DEFLATE text/html text/css text/javascript application/javascript application/x-javascript
</IfModule>
</IfModule>

#If rewrite mod isn't enabled
ErrorDocument 404 /index.php?controller=404

# ~~end~~ Do not remove this comment, Prestashop will keep automatically the code outside this comment when .htaccess will be generated again

# start ~ module watermark section
Options +FollowSymLinks
RewriteEngine On
RewriteCond expr "! %{HTTP_REFERER} -strmatch '*://%{HTTP_HOST}*/admin/*'"
RewriteRule [0-9/]+/[0-9]+\.jpg$ - [F]
# end ~ module watermark section
php_value max_input_vars 11000
php_flag apc.cache_by_default Off
Продвижение сайтов http://site-top.ru
09 Июля 2015, 19:18:44
Ответ #1
  • Ветеран
  • *****
  • Сообщений: 86196
  • Репутация: +25412/-0
  • Сообщество PrestaShop
    • Просмотр профиля
Установите права на доступ CHMOD 755 для robots.txt.
Или удалите robots.txt и заново создайте в админке.
Панель управления > Настройки SEO и UR
Генератор файлов Robots
09 Июля 2015, 19:29:37
Ответ #2
  • Модератор
  • Ветеран
  • *****
  • Сообщений: 884
  • Репутация: +206/-0
    • Просмотр профиля
Версия prestashop какая?
09 Июля 2015, 20:47:04
Ответ #3
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Установите права на доступ CHMOD 755 для robots.txt.
Или удалите robots.txt и заново создайте в админке.
Панель управления > Настройки SEO и UR
Генератор файлов Robots
Сделал так - к сожалению, не помогло.
Продвижение сайтов http://site-top.ru
09 Июля 2015, 20:47:50
Ответ #4
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Версия prestashop какая?
Версия Prestashop 1.6.0.9
Продвижение сайтов http://site-top.ru
09 Июля 2015, 20:54:32
Ответ #5
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Что характерно, изменил название файла на robots1.txt - открывается /robots1.txt
Продвижение сайтов http://site-top.ru
09 Июля 2015, 23:16:44
Ответ #6
  • Ветеран
  • *****
  • Сообщений: 1255
  • Репутация: +32/-1
  • Сообщество PrestaShop
    • Просмотр профиля
В настройках веб сервера стоит запрет на доступ к файлу robots.txt
10 Июля 2015, 09:40:48
Ответ #7
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
В настройках веб сервера стоит запрет на доступ к файлу robots.txt
Подскажете как убрать этот запрет и где? А то я не особо шарю. Спросил знакомого программера - он тоже не смог мне помочь.
Продвижение сайтов http://site-top.ru
10 Июля 2015, 10:10:33
Ответ #8
  • Ветеран
  • *****
  • Сообщений: 2552
  • Репутация: +58/-4
  • Сообщество PrestaShop
    • Просмотр профиля
Сервер Apache или Nginx?
10 Июля 2015, 10:29:18
Ответ #9
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Сервер Apache или Nginx?
Сначала Nginx потом Apache - так вроде
Продвижение сайтов http://site-top.ru
10 Июля 2015, 10:57:52
Ответ #10
  • Ветеран
  • *****
  • Сообщений: 2552
  • Репутация: +58/-4
  • Сообщество PrestaShop
    • Просмотр профиля
Вот в конфигах nginx ищи запрет на доступ. Типа такого
location = /robots.txt {
        deny all;
11 Июля 2015, 14:45:56
Ответ #11
  • Новичок
  • *
  • Сообщений: 23
  • Репутация: +0/-0
  • Сообщество PrestaShop
    • Просмотр профиля
    • site-top
Всем спасибо за советы!
Написал хостеру - исправили ошибку. Скорее всего да, стоял запрет на сервере.
Продвижение сайтов http://site-top.ru