- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
kimberlit, У него действительно не правильно написан.
Все теперь работает.
User-agent: Yandex
Disallow: /administrator
Disallow: /cache
Disallow: /components
Disallow: /includes
Disallow: /installation
Disallow: /language
Disallow: /libraries
Disallow: /media
Disallow: /modules
Disallow: /plugins
Disallow: /templates
Disallow: /tmp
Disallow: /xmlrpc
Disallow: /rss
Disallow: /atom
Disallow: /*tag
Crawl-delay: 1
Host: site.ru
Sitemap: site.ru/sitemap.xml
Яндекс бот чувствителен к регистру урла. Т.е если напишите:
Disallow: forum/
а на деле у вас ForUM, то он пройдет и будет индексировать
Вроде нормульно всё...
В Яндекс.вебмастере: Документ запрещен в файле robots.txt
Не путайте то, что в Вебмастере пишется и то, что запрещено непосредственно в robots.txt !
Проверяйте здесь. Всё ОК! Запрещено правильно.
---
site.ru/tag/ещё_что-нидь - такие фильтрует.
Если, речь идёт о ссылке, типа site.ru/ещё_папка/tag/, то такие в пролёте, под правило запрета не попадут.
Кусок сабаки, ты сам лучше почитай мануал.
1. начало должно быть со слеша
2. звёздочка в конце необязательна (по умолчанию идёт)
Конечно прочитал
и нет уточнения - в начале или в конце.
Если я не прав, то приведите цитату из источника.
И потом, попробуйте в панели.вм предложенный мной вариант.
Jafar, так у тебя url такие что ли: site.ru/blabla/tag/ ???
Все теперь работает.
User-agent: Yandex
Disallow: /administrator
Disallow: /cache
Disallow: /components
Disallow: /includes
Disallow: /installation
Disallow: /language
Disallow: /libraries
Disallow: /media
Disallow: /modules
Disallow: /plugins
Disallow: /templates
Disallow: /tmp
Disallow: /xmlrpc
Disallow: /rss
Disallow: /atom
Disallow: /*tag
Crawl-delay: 1
Host: site.ru
Sitemap: site.ru/sitemap.xml
теперь у тебя только последняя команда читаться будет..
User-agent: Yandex
Disallow: /administrator
Disallow: /cache
Disallow: /components
Disallow: /includes
Disallow: /installation
Disallow: /language
Disallow: /libraries
Disallow: /media
Disallow: /modules
Disallow: /plugins
Disallow: /templates
Disallow: /tmp
Disallow: /xmlrpc
Disallow: /rss
Disallow: /atom
Disallow: /*tag
А вот так будет пахать..
через строку команды
через строку писать уж точно не рекомендуется.
Jafar, так у тебя url такие что ли: site.ru/blabla/tag/ ???
Да, в этом был косяк. Некоторые урлы были .ru/component/tag/...
Да, в этом был косяк. Некоторые урлы были .ru/component/tag/...
Ясно.
User-agent: Yandex
Disallow: /administrator
Disallow: /cache
Disallow: /components
Disallow: /includes
Disallow: /installation
Disallow: /language
Disallow: /libraries
Disallow: /media
Disallow: /modules
Disallow: /plugins
Disallow: /templates
Disallow: /tmp
Disallow: /xmlrpc
Disallow: /rss
Disallow: /atom
Disallow: /*tag
А вот так будет пахать..
Сео барин, ты глупость пишешь ))) Учи матчасть.
Ах да и сайт мапа указывается так:
Sitemap: http://www.xxxxxxxx.com/sitemap.xml
Seo_Barin добавил 24.02.2010 в 12:34
Ясно.
Сео барин, ты глупость пишешь ))) Учи матчасть.
Возможно, но так работает - почему ?