- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: http://sem-biz.ru/Lost-user-name/
Disallow: http://sem-biz.ru/Lost-password/
Disallow: http://sem-biz.ru/Kontakty/Znakomimsya-Kabakov-Artёm
Sitemap: http://sem-biz.ru/component/option,com_xmap/Itemid,104/sitemap,1/
Проверьте пожалуйста, подойдёт такой или нет?
2-4 снизу неправильно
1 сверху неправильно с точки зрения безопасности
а у меня такой
User-agent: *
Crawl-delay: 4.5
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
User-agent: Yandex
Allow: /cgi-bin
у меня такой
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Sitemap: http://my-dle-site.ru/sitemap.xml
User-agent: Yandex
Host: my-dle-site
consecro, Andryw, как, индексации помогают такие темы?
skrayu, Andryw, между секциями нужна пустая строка.
Проверьте пожалуйста, подойдёт такой или нет?
Вот такой подойдет
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: www.sem-biz.ru
Sitemap: http://www.sem-biz.ru/sitemap.xml
Sitemap лучше в таком виде в корне разместить
можно еще под Яшу отдублировать
т.е самый простой вариант будет так ?
Disallow: /user/
Host: http://сайт
User-Agent: *
Sitemap: http://сайт/sitemap.xml
Да, так будет лучше всго, наверное
Да, так будет лучше всго, наверное
Точного ответа нет?🚬
Sitemap лучше в таком виде в корне разместить
чтобы парсить было удобнее 😂