robors.txt картинки и видимость сайта.

palarmaz
На сайте с 05.04.2010
Offline
125
2166

Возникло несколько вопросов по поводу правильного использования файла robots.txt.

1. Вы закрываете папку с картинками в роботс.тхт ? По идее, я думаю что можно закрыть папку /uploads/ - где находятся картинки у wordpress. Почему то все не делают этого? К примеру у меня не уникальные картинки и я не хочу чтобы робот их видел. Как вы думаете?

2. Обмануть робота закрыв раздел сайта.

Был сайтик белый и пушистый. Но однажды на нем образовался раздел для взрослых (маленький, 5% от всего сайта). Траф начал по тихоньку меняться с белых запросов на взрослые. Количество трафа тоже изменилось не в лучшую сторону. Как я понимаю, яндекс решил поменять тематику на взрослую. А что если закрыть в роботсе этот раздел? Улучшится положение и вернуться позиции по тем старым запросам?

3. Непонятный вопрос по закрытию категорий. Есть такой урл:

http://site.ru/page/6/ - Его нужно закрыть в роботс.

http://site.ru/video/podztroika-video-kanala/page/2 - Его не нужно закрывать.

Disallow: site.ru/page - будет правильным?

schwebpes
На сайте с 08.02.2011
Offline
10
#1

2. При прочих равных факторах и без фильтра - вернутся спустя 3-4 апдейта (или дольше). Только "взрослые" запросы на ваш сайт трафик приводить перестанут. А "пушистые" запросы, я так понимаю, не кормят...

"Профессиональные Комплексные Решения" (http://prcs.ru) - IT-директор Использую СеоПульт (http://seopult.ru/ref.php?ref=820be88242cc323a)
palarmaz
На сайте с 05.04.2010
Offline
125
#2

То есть получается яндексу все равно, если например, у меня есть одна категория "Все Для Бабушек" и 10 категорий с жестким "Адалтом" (закрытым в роботс) - то яндекс будет гнать мне "бабушек" на сайт? Они же прозреют:)

nik2019
На сайте с 28.04.2009
Offline
182
#3
palarmaz:
- то яндекс будет гнать мне "бабушек" на сайт? Они же прозреют:)

однозначно:))

Многодарю
N
На сайте с 08.08.2006
Offline
134
#4
palarmaz:
Возникло несколько вопросов по поводу правильного использования файла robots.txt.

1. Вы закрываете папку с картинками в роботс.тхт ? По идее, я думаю что можно закрыть папку /uploads/ - где находятся картинки у wordpress. Почему то все не делают этого? К примеру у меня не уникальные картинки и я не хочу чтобы робот их видел. Как вы думаете?

2. Обмануть робота закрыв раздел сайта.
Был сайтик белый и пушистый. Но однажды на нем образовался раздел для взрослых (маленький, 5% от всего сайта). Траф начал по тихоньку меняться с белых запросов на взрослые. Количество трафа тоже изменилось не в лучшую сторону. Как я понимаю, яндекс решил поменять тематику на взрослую. А что если закрыть в роботсе этот раздел? Улучшится положение и вернуться позиции по тем старым запросам?

3. Непонятный вопрос по закрытию категорий. Есть такой урл:
http://site.ru/page/6/ - Его нужно закрыть в роботс.
http://site.ru/video/podztroika-video-kanala/page/2 - Его не нужно закрывать.
Disallow: site.ru/page - будет правильным?

Зачем закрывать от индексации всю папку ? Может там чего полезного будет! Закройте вывод картинок в noindex.

По robots.txt не мучайте себя, спросите у Платонов. :) Если будете не уверены в их ответе переспросите, они тоже ошибаются. :) Бывает, зависают походу.

Аналитик
J
На сайте с 26.03.2008
Offline
95
#5

По закрытию страниц и категорий в хелпе яндекса хорошо написано - http://help.yandex.ru/webmaster/?id=996567

Если закрывать robots адалт тему, то по остальным заросам поднимется, но это до поры до времени. Если адалт убирать не будете и спросите Платонов с указанием сайта - отнесут ручками к адалту и robots уже не поможет.

Buc
На сайте с 12.05.2009
Offline
24
Buc
#6

Правильность robots.txt проверяйте тут http://webmaster.yandex.ru/robots.xml

Вставляете кучку урлов и проверяете что закрывается правильно, а что нет, при необходимости тут же меняете правила robots.txt, как закончите, не забудьте на сайте robots поменять

Вечные ссылки (http://bit.ly/oldlinks) + Эффективное продвижение (http://bit.ly/easytop) + Удобная пробивка позиций (http://bit.ly/seopos)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий