Robots.txt

Y5
На сайте с 24.10.2013
Offline
0
380

Всем добрый день перейду сразу к вопросу на FTP структура моего сайта такова mysite.ru/mysite и mysite.ru/www

Все основные файлы сайта лежат на mysite.ru/mysite, а файл робота берется с mysite.ru/www отсюда проблемы с индексацией картинок в яндекс и гугл картинках, как можно решить данную проблему, то есть может есть команда для робота чтобы он поднялся на одну папку выше и зашёл в mysite.ru/mysite/public или как то можно яндекс заставить читать файл робота mysite.ru/mysite/robots.txt а не mysite.ru/www/robots.txt ?

От себя добавлю такую чехарду с "засовыванием" данных сайта не в папку www, придумал не я, и работаю на фирме с готовым сайтом, написанным до меня, знаний, чтобы самостоятельно всё переместить в www пока недостаточно (начинающий работник))

cheredov
На сайте с 07.04.2011
Offline
125
#1
yurka51:
Всем добрый день перейду сразу к вопросу на FTP структура моего сайта такова mysite.ru/mysite и mysite.ru/www

Все основные файлы сайта лежат на mysite.ru/mysite, а файл робота берется с mysite.ru/www отсюда проблемы с индексацией картинок в яндекс и гугл картинках, как можно решить данную проблему, то есть может есть команда для робота чтобы он поднялся на одну папку выше и зашёл в mysite.ru/mysite/public или как то можно яндекс заставить читать файл робота mysite.ru/mysite/robots.txt а не mysite.ru/www/robots.txt ?

От себя добавлю такую чехарду с "засовыванием" данных сайта не в папку www, придумал не я, и работаю на фирме с готовым сайтом, написанным до меня, знаний, чтобы самостоятельно всё переместить в www пока недостаточно (начинающий работник))

Настройте и положите robots.txt в mysite.ru/mysite/

проверьте находит ли его робот через вебмастер(Анализ robots.txt)

Иван Чередов (http://ivan.cheredov.com/about/)
Y5
На сайте с 24.10.2013
Offline
0
#2
cheredov:
Настройте и положите robots.txt в mysite.ru/mysite/
проверьте находит ли его робот через вебмастер(Анализ robots.txt)

Пробовал когда ложу mysite.ru/mysite/robots.txt вебмастер не видит его...

---------- Добавлено 24.10.2013 в 11:28 ----------

Вот структура одной и другой папки

cheredov
На сайте с 07.04.2011
Offline
125
#3

yurka51, у вас в http://rozarioflowers.ru/robots.txt закрыты картинки:

User-agent: *
Disallow: /admin
Disallow: /stylesheets
Disallow: /javascript
Disallow: /images
Allow: /public/
Host: rozarioflowers.ru
Sitemap: http://rozarioflowers.ru/sitemap.xml

User-agent: Googlebot-Image
Allow: /public/

User-agent: YandexImages
Allow: /public/

может в этом причина? удалите эту строчку а остальное оставьте как есть

---------- Добавлено 24.10.2013 в 14:46 ----------

yurka51,блин, картинки у вас не там лежат, а в /uploads/

---------- Добавлено 24.10.2013 в 14:49 ----------

yurka51, оставьте в роботсе только

User-agent: *

Host: rozarioflowers.ru

Sitemap: http://rozarioflowers.ru/sitemap.xml

Y5
На сайте с 24.10.2013
Offline
0
#4
cheredov:
yurka51, у вас в http://rozarioflowers.ru/robots.txt закрыты картинки:

может в этом причина? удалите эту строчку а остальное оставьте как есть

---------- Добавлено 24.10.2013 в 14:46 ----------

yurka51,блин, картинки у вас не там лежат, а в /uploads/

---------- Добавлено 24.10.2013 в 14:49 ----------

yurka51, оставьте в роботсе только
User-agent: *
Host: rozarioflowers.ru
Sitemap: http://rozarioflowers.ru/sitemap.xml

Да не, папка Images для системных изображений

Попробую сделать как вы говорите, Яндекс сам то индексирует меня нормально, а вот Яндекс картинки не ту дирректорию берёт что надо....

cheredov
На сайте с 07.04.2011
Offline
125
#5
yurka51:
Да не, папка Images для системных изображений

Попробую сделать как вы говорите, Яндекс сам то индексирует меня нормально, а вот Яндекс картинки не ту дирректорию берёт что надо....

Как это? если у вас есть <img src="... то оттуда и берет, если доступ не закрыт.

Y5
На сайте с 24.10.2013
Offline
0
#6
cheredov:
Как это? если у вас есть <img src="... то оттуда и берет, если доступ не закрыт.

Сам понять не могу, на сайте есть более 700 товаров с картинками http://rozarioflowers.ru, но, почему то если в Яндекс картинках набрать host:rozarioflowers.ru он выдаст ничтожную часть того, что имеется...Повторюсь я в этом деле начинающий, и если что-то элементарное прошу не ругаться )

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий