Форум Поисковые системы Агрегаторы и доски объявлений

robots.txt для wordpress

TC
На сайте с 14.11.2025
Offline
0
TurboCafe
412

Доброго дня всем.

Буду благодарен уважаемым гуру за подсказку.

Есть доска объявлений на WP

результаты в выдаче не оч радовали, хотя прописываю каждое объявление  вручную в Yoast SEO


полез править robots.txt

но стало еще хуже по-моему.

Видимо что-то там неправильно сделал (

Посмотрите пожалуйста,

подскажите что поправить можно.

Заранее благодарен.

Текст robots ниже




User-agent: *                   # Создаем секцию правил для роботов. * значит для всех

# роботов. Чтобы указать секцию правил для отдельного

# робота, вместо * укажите его имя: GoogleBot, Yandex.

Disallow: /cgi-bin              # Стандартная папка на хостинге.

Disallow: /wp-admin/            # Закрываем админку.

Allow: /wp-admin/admin-ajax.php # Откроем аякс.

Disallow: /?                    # Все параметры запроса на главной.

Disallow: *?s=                  # Поиск.

Disallow: *&s=                  # Поиск.

Disallow: /search               # Поиск.

Disallow: /author/              # Архив автора.

Disallow: */embed$              # Все встраивания.

Disallow: */xmlrpc.php          # Файл WordPress API

Disallow: *utm*=                # Ссылки с utm-метками

Disallow: *openstat=            # Ссылки с метками openstat

Allow: */wp-*/*.js 

Allow: */wp-*/*.

Allow: */wp-*/*.png 

Allow: */wp-*/*.jpg 

Allow: */wp-*/*.jpeg 

Allow: */wp-*/*.gif 


G6
На сайте с 12.07.2007
Offline
193
garry69
#1
Всё, что не запрещено, разрешено, у вас весь сайт открыт. да и этот файл не более чем рекомендация и скорее всего, дело в других моментах на сайте.
Работа с ПФ дёшево, плюс тест https://vk.cc/cReVya | Каталог каналов/чатов, ботов MAX https://max.worldwebinfo.ru
TC
На сайте с 14.11.2025
Offline
0
TurboCafe
#2

спасибо за ответ.

Еще хотел бы картинки в выдачу вывести, но пока не очень с этим

Сергей Новиков
На сайте с 13.05.2025
Offline
12
Сергей Новиков
#3

Уберите всё, кроме первых трех строк (User-agent: *, Disallow: /wp-admin/, Allow: /wp-admin/admin-ajax.php). Всё остальное либо не нужно, либо вредно

Ваша проблема на 99% не в robots.txt - он не влияет на ранжирование, он только разрешает или запрещает сканирование. Плохие позиции это контент, ссылки, поведенческие

OpenAI разрешила сайтам закрывать Новые стандарты для директивы Google назвал самые частые
Сергей Новиков
На сайте с 13.05.2025
Offline
12
Сергей Новиков
#4
TurboCafe #:

спасибо за ответ.

Еще хотел бы картинки в выдачу вывести, но пока не очень с этим

Чтобы картинки попали в выдачу, нужно три вещи:

1. Уникальное имя файла. Не IMG_12345.jpg, а prodam-krasnuyu-nivu.jpg

2. Заполненный alt-тэг (текстовое описание картинки)

3. Чтобы картинка была окружена релевантным текстом

Всё. Никакой магии в robots.txt для этого не нужно

Платон Щукин про индексацию Altavista F.A.S.T. - краткая характеристика
fillonon
На сайте с 24.12.2009
Offline
149
fillonon
#5
Там же есть стандартный, в интернете первый попавшийся взять хотя бы…сложностей с индексацией быть не должно, но под фильтр залетают легко такие страницы
Если нужно SEO продвижение ( https://seouspeh.ru/ ) - конкурировал с миллиардерами в поиске / Подробный чек-лист по Seo ( https://seouspeh.ru/seo/podrobnyj-chek-list-po-seo-dlya-proverki-proekta.html ) / Почему на сайте резкое падение трафика (https://seouspeh.ru/seo/rezkoe-padenie-trafika-stolknovenie-s-filtrami-poiskovyx-sistem-yandeks-i-google.html)
Жорик
На сайте с 11.09.2006
Offline
212
Жорик
#6
TurboCafe :
Disallow: /wp-admin/            # Закрываем админку.
Это хакерам в подарок? Админка должна быть закрыта серверным паролем как минимум.
Сергей про е-ком
На сайте с 11.05.2008
Offline
337
Сергей про е-ком
#7
Сергей Новиков #:

Уберите всё, кроме первых трех строк (User-agent: *, Disallow: /wp-admin/, Allow: /wp-admin/admin-ajax.php). Всё остальное либо не нужно, либо вредно

Ваша проблема на 99% не в robots.txt - он не влияет на ранжирование, он только разрешает или запрещает сканирование. Плохие позиции это контент, ссылки, поведенческие

User-Agent: *
Host: сайт, www/https
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: полная ссылка на карту сайта (базовый файл)
Disallow: /wp-content/uploads/wc-logs/
Disallow: /wp-content/uploads/woocommerce_transient_files/
Disallow: /wp-content/uploads/woocommerce_uploads/
Disallow: /wp-content/uploads/wpo/wpo-plugins-tables-list.json
Clean-param: from&utm_source&utm_medium&utm_campaign&utm_content&utm_term&yclid&gclid&fbclid&etext
Это отраслевой стандарт.
Крутейшая тема и конструктор на WP - https://shop.greenshiftwp.com/?from=3338

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий