xaxel3000

xaxel3000
Рейтинг
97
Регистрация
23.07.2011
Ingref:
Разные. Можно вместо двух строк одну строку прописать:
Allow: /info/sites/default/files/*.jp*g

Ваши замечания справедливы. Так и было :)

Спасибо.

xaxel3000:
Здравствуйте.
Обнаружил, что у меня не индексируются картинки на сайте . Лежать вот здесь - http://zap-online.ru/info/sites/default/files/snyatii_obivki_v_bmw_f10_v_bagazhnike.jpeg
Закрыты в robots.txt так - /info/sites/
Вопрос, как открыть доступ к картинкам для ПС? Только переносом папки с картинками? Или можно создать какое-то правильно в robots.txt ?
Ingref:
Они у вас не только в robots.txt закрыты, ваш сервер при запросе картинки выдает код ответа 403 Forbidden. Соответственно, нужно, чтобы сервер выдавал 200 ОК, а в robots.txt добавить:

Allow: /info/sites/default/files/*.jpeg
(и так для всех расширений картинок)

Спасибо. Заработало)

Подскажите, а это разные расширения или одно и тоже:

Allow: /info/sites/default/files/*.jpeg

и

Allow: /info/sites/default/files/*.jpg

LDA777:
База линкпада обновляется, наверное, раз в сто лет, поэтому он все еще помнит ссылки все, когда их давно нет на самом деле.

Я посмотрел сейчас вашу главную страницу под обычным браузерным юзерагентом и под юзерагентами Яндекса и Гугла - никаких скрытых (заклоаченных по поисковому юзерагенту) ссылок нет вроде.

Посмотреть все ссылки на странице можно вот таким javascript'ом (просто сохраните закладку/букмарклет в браузер, вбив скрипт вместо урла, и потом, находясь на нужной для проверки странице сайта, кликните по закладке):

javascript:all=document.links.length;mass='<b>Всего ссылок на странице:\u0020' all '</b><br><br>\n';for(i=0;i<all;i  ){mass =document.links '<br>\n';}newwind=window.open('about:blank','result','width=600,top=100,left=100,scrollbars=1');newwind.document.write(mass);

У меня очень много страниц( Все не проверишь таким образом. Но все равно больше спасибо.

sslab:
Можно добавить сайт в панель в моей подписи. Через какое-то время соберет и покажет в таком виде. По запросу могу запустить сбор вне основной очереди.

Здравствуйте. К сожалению не совсем понял, что нужно сделать(((

Desesperada:
код для полного счастья и ровных отступов от текста (style.css 264 строка):


и будет красота


если хотите старую ширину, оставьте прежним значение "width"

Большое спасибо. Разжевали) Я долго искал .form-bt , style.css и 264 строчку в файле самой страницы, но потом догадался поискать отдельный файл style.css)))

В результате все получилось как нельзя лучше! Спасибо!

zhurikzzz:
Если в урлах целевых страниц нет знаков вопроса (?), то вот так:
Disallow: /*?

Ну или так Disallow: /*image_captcha?sid=

В целевых вроде нет. Большое спасибо.

Здравствуйте.

Надо закрыть страницы вот такого формата :

http://zap-online.ru/info/image_captcha?sid=2428351&ts=1460112388

http://zap-online.ru/info/image_captcha?sid=2433433&ts=1460297904

Как прописать в robots.txt? Спасибо.

Dazemc:
Директива Crawl-delay

Если сервер сильно нагружен и не успевает отрабатывать запросы на загрузку, воспользуйтесь директивой Crawl-delay. Она позволяет задать поисковому роботу минимальный период времени (в секундах) между окончанием загрузки одной страницы и началом загрузки следующей.
В целях совместимости с роботами, которые не полностью следуют стандарту при обработке robots.txt, директиву Crawl-delay необходимо добавить в группу, которая начинается с записи User-Agent, непосредственно после директив Disallow и Allow).
Поисковый робот Яндекса поддерживает дробные значения Crawl-Delay, например, 0.5. Это не гарантирует, что поисковый робот будет заходить на ваш сайт каждые полсекунды, но позволяет ускорить обход сайта.

Ага, спасибо.

Значит у меня она неправильно стоит(

Щас переделаю.

Обнаружил у себя в robots.txt вот такую надпись, с которой раньше не сталкивался (выделено жирным) -

User-agent: *

Crawl-delay: 10

# Directories

Disallow: /info/includes/

Disallow: /info/misc/

Disallow: /info/modules/

Гугл че то ругается на нее - http://joxi.ru/82Q5xLNH1jZnj2 . Возможно поставил один их ранее нанятых вебмастеров.

Вопрос: Зачем нужна эта надпись и нужна ли вообще?

andrey2501:
Вчера получил ответ:

Сейчас с Вашим сайтом все в порядке. Санкции с него сняты. В ближайшее время его ранжирование в результатах поиска сможет улучшиться, а показатель тИЦ будет обновлен после ближайших пересчетов.

--
С уважением, Платон Щукин


Но, пока всё без изменений, переходов с яндекса в 20 раз меньше, чем до 7.09

Я примерно такой ответ уже 2 недели получаю. Сегодня написали, что еще 2 недели надо подождать, пока их робот в гости зайдет.

Всего: 156