- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте!
Зашел в вебмастер яндекса и увидел что он типа загрузил 60 страниц для индексирования и проиндексировал всего одну, потому что остальные вроде как запрещает robots.txt
До этого такого я не видел.
Сайт молодой extruziv.ru - до этого в индекс попала 1 страница, потом через пару дней вторая, потом третья. Все. Потом тишина пару недель и вот 59 страниц оказывается запрещает robots.txt...
про robots.txt почитал ..вроде нормальный составил (во всяком случае google не ругается)
Может я все таки в robots.txt что то напортачил....кто соображает подскажите чего делать то?
Вот сам файл:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: extruziv.ru
Sitemap: http://extruziv.ru/sitemap.xml
Заранее спасибо всем даже за попытку помочь...
Disallow: /*?*
Disallow: /*?
Эти директивы запрещают индексировать и страницы, и записи вида http://site.ru/?p=123, http://site.ru/?page_id=123. Именно такие урлы создаёт Wordpress.
А именно такие урлы создаёт Wordpress.
Веб, у него чпу на сайте как бы. Да и роботс другой на сайте.
Веб, у него чпу на сайте как бы. Да и роботс другой на сайте.
как другой? я вроде копировал именно оттуда?
Веб, у него чпу на сайте как бы
Ну тогда не знаю. Остальное, вроде, сомнений не вызывает.
как другой? я вроде копировал именно оттуда?
У меня такой открывается: http://extruziv.ru/robots.txt
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: extruziv.ru
Sitemap: http://extruziv.ru/sitemap.xml
Sitemap: http://extruziv.ru/sitemap.xml.gz
А robots, кстати, другой, да:
В панели вебмастера yandex есть возможность проверки на индексацию каждой страницы в которой Вы сомневаетесь.
Там же можно поиграться с самим robots.txt если что не так.
Но скорее всего не в нем дело, судя по файлу.
Вот скрин прям вот "сейчашний" свежий....откуда у вас такое? не знаю... Как видите и адрес в строке браузера мой...ОТКУДА у Вас такое?...Вот незадача...
Блин..у Вас один robots....у меня другой...чего делать то теперь.....мистика какая то))))
Яндекс-то какой видит? В панели вебмастера можно посмотреть. А то там может какой-то третий вообще? 🤪
---------- Добавлено 09.03.2013 в 17:37 ----------
Блин..у Вас один robots....у меня другой
Может закешировался в браузере?