- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
AVV, спасибо, выручил!
Мужики, а как закрывать целые страницы и директории от индексации.
Я слышал, что можно через .htasses
удалил. неправильно посоветовал.
Хотел написать
.htaccess
<FilesMatch "(page1|page2|page3|page4)\.html$">
Deny from all
</FilesMatch>
но этот вариант не подходит, т.к. в этом случае, закрываем эти страницы вообще, а не только от ботов.
--
Закройте через robots.txt
User-agent: *
Disallow: /page1
Disallow: /page2
Disallow: /page3
Disallow: /page4
что будет разумнее.
--
Можно еще закрыть необходимые директории паролями.
http://www.google.ru/search?hl=ru&q=%D0%B7%D0%B0%D0%BA%D1%80%D1%8B%D1%82%D1%8C+%D0%BF%D0%B0%D1%80%D0%BE%D0%BB%D0%B5%D0%BC+%D0%B4%D0%B8%D1%80%D0%B5%D0%BA%D1%82%D0%BE%D1%80%D0%B8%D1%8E&btnG=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA&lr=
предположим мне надо закрыть от инксации директорию - sait.com/promo, в которой более 300 html страниц.
Правильно ли я делаю:
создать robots.txt
User-agent: *
Disallow: /promo
и поместить его в директорию sait.com
-------------------
А теперь предположим, что только 5 страниц из 300:
Правильно ли я делаю:
создать robots.txt
User-agent: *
Disallow: /page1
Disallow: /page2
Disallow: /page3
Disallow: /page4
Disallow: /page5
(разве расширение page5.html не надо писать?)
и поместить его в директорию sait.com/promo
предположим мне надо закрыть от инксации директорию - sait.com/promo, в которой более 300 html страниц.
создать robots.txt в корне сайта, т.к. роботс.тхт всегда кладется в корень сайта
User-agent: *
Disallow: /promo/
Закрыли всю директорию promo
-------------------
А теперь предположим, что только 5 страниц из 300:
написать в robots.txt
Disallow: /page1
Disallow: /page2
Disallow: /page3
Disallow: /page4
Disallow: /page5
закрыли 5 страниц на сайте, независимо от директории
-------------------
не обязательно. Если у вас две, или более страниц, например в разных директориях,
к примеру, в одной - page5.html, а в другой - page5.php, тогда надо.
Я подразумеваю, что в одной директории две страницы page5 с разными расширениями быть не может. :)
-------------------
Все вместе будет так:
User-agent: *
Disallow: /page1
Disallow: /page2
Disallow: /page3
Disallow: /page4
Disallow: /page5
Disallow: /promo/
Закрыли всю директорию promo и 5 страниц, независимо от директории
или
User-agent: *
Disallow: /promo/page1
Disallow: /promo/page2
Disallow: /promo/page3
Disallow: /promo/page4
Disallow: /promo/page5
Закрыли 5 страниц в директории promo
User-agent: *
Disallow: /page1
Disallow: /page2
Disallow: /page3
Disallow: /page4
Disallow: /page5
закрыли 5 страниц на сайте, независимо от директории
Я бы сказал, закрыли все URL, которые от корня начинаются на
/page1
/page2
/page3
/page4
/page5
Для более глубокого понимания вопроса:
вот robots.txt Яндекса, для сравнения:
User-agent: *
Disallow: /?
Disallow: /404.html
Disallow: /about.html
Disallow: /advanced_engl.html
Disallow: /advertising
Disallow: /articles
Disallow: /chisla.html
Disallow: /cgi-bin/
Disallow: /cgi/
Disallow: /cy
Disallow: /dzen.html
Disallow: /i/
Disallow: /ie3/yandsearch
Disallow: /keyboard_qwerty.html
Disallow: /logotypes
Disallow: /norobot
Disallow: /polling
Disallow: /redir
Disallow: /regions.html?
Disallow: /s/
Disallow: /setup
Disallow: /skazki
Disallow: /subscribe/confirm.pl
Disallow: /subscribe/view.pl
Disallow: /yaca
Disallow: /ya
Disallow: /yandsearch
Host: www.yandex.ru
john2007, абсолютно верное дополнение.
AVV, огромное тебе спасибо, так подробно и доходчиво никто ещё не объяснял
glazov, рад стараться! :) Спасибо за комплимент.