- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Стоит CMS Битрикс, проблемы с индексацией. Сейчас сделал такой robots.txt, подскажите будет ли нормально индексироваться главная + 10 страниц. А все остальные страницы не будут проверяться роботом. (На данный момент Google проиндексировал 565 страниц, хочу это исправить)
User-agent: *
Allow: /index.php
Allow: /o_kompanii.php
Allow: /uslug/
Allow: /uslug/burenie/
Allow: /uslug/ochistka/
Allow: /uslug/otoplenie/
Allow: /oborud/
Allow: /oborud/obor_ochistka/
Allow: /oborud/obor_otoplen/
Allow: /info/stat/bur.php
Allow: /contact/
Disallow: /
Сайту уже 1,5 года. Вот то, что мне на данный момент нужно показать ПМ, а всё остальноё скрыть...
Собственно сайт: http://www.gidrostroy-sp.ru
З.Ы - Cайт только передан Веб-Мастеру, на содержание внимание не обращать.
дел..
я бы на вашем месте добавил на эти 10 страниц тег <meta name="robots" content="index" />, на все остальные noindex
Disallow: /
этой строкой запрещается индексация всего сайта
если логически подумать то от такого роботса вообще не будет индексироваться сайт
я бы на вашем месте добавил на эти 10 страниц тег <meta name="robots" content="index" />, на все остальные noindex
Уверены ? Остальные не страницы, а какие то дубли Битрикс (там их 555 шт.)
если логически подумать то от такого роботса вообще не будет индексироваться сайт
поделитесь логикой...
Disallow: /
этой строкой запрещается индексация всего сайта
http://help.yandex.ru/webmaster/?id=996567 если смотреть сюда, то
Если для данной страницы сайта подходит несколько директив, то выбирается первая в порядке появления в выбранном User-agent блоке. Примеры:
User-agent: Yandex
Allow: /cgi-bin
Disallow: /
# запрещает скачивать все, кроме страниц
# начинающихся с '/cgi-bin'
Fr3d, seognom, не вводите в заблуждение!
можно сократить кстати
User-agent: *
Allow: /index.php
Allow: /o_kompanii.php
Allow: /uslug
Allow: /oborud
Allow: /info/stat/bur.php
Allow: /contact/
Disallow: /
Fr3d, seognom, не вводите в заблуждение!
можно сократить кстати
User-agent: *
Allow: /index.php
Allow: /o_kompanii.php
Allow: /uslug
Allow: /oborud
Allow: /info/stat/bur.php
Allow: /contact/
Disallow: /
Спасибо.
Просто в услугах может быть ещё страницы, которые мне сейчас не нужно индексировать. Можно обойти это так ?
Allow: /uslug/burenie/
А вообще этот способ уточнения индексации хуже для Яндекса или без разницы ? (по сравнению с свободным индексом)
А вообще этот способ уточнения индексации хуже для Яндекса или без разницы ?
Ему без разницы. Даже работы роботу меньше.
Вот что Google делает с сайтом - http://www.google.ru/#sclient=psy&hl=ru&newwindow=1&source=hp&q=site:gidrostroy-sp.ru&aq=&aqi=&aql=&oq=&pbx=1&bav=on.2,or.r_gc.r_pw.&fp=31a96563843d0bd0&biw=1920&bih=867