Все вопросы по robots.txt - 2

[Удален]
#171

Вопрос не в роботсе и страницам по которым бот прошел. Тут нужен сайт для просмотра.

O
На сайте с 14.08.2018
Offline
0
#172
Miha Kuzmin (KMY):
Вопрос не в роботсе и страницам по которым бот прошел. Тут нужен сайт для просмотра.

Правила форума надеюсь не нарушу. Чутка поломаю ссылку.

Сайт по облачным решениям. В планах дальше наполнять и добавлять сервисы.

_besplatnye-oblaka._ru

[Удален]
#173

Odwin, по правилам форума в этом вопросе даже грей ругался - какого хрена вы даете нерабочие ссылки 😂

---------- Добавлено 14.08.2018 в 14:38 ----------

https://besplatnye-oblaka.ru - это самый настоящий дор. Вот и вся любовь.

donc
На сайте с 16.01.2007
Offline
663
#174
Odwin:
Сайт по облачным решениям.

Шикарный сайт.

Я такие в 1998-99 году делал, назвал громко - путеводитель по интернету.

Тогда вполне канало, с учетом почти полного отсутствия в этих ваших интернетах ПС.

Осуждаем применение нейросетей в SEO и не только ( https://webimho.ru/forum/148/ ) :) Продвижение сайтов от 25 000 в мес, прозрачно, надежно ( /ru/forum/818412 ), но не быстро, отзывы ( http://webimho.ru/topic/3225/ )
V9
На сайте с 21.10.2017
Offline
43
#175

http://archimas.kz/wp-content/uploads/2018/08/Screenshot_1.png

подскажите пожалуйста что не так? ссылка на скриншет сверху.

сайт по которому задаю вопросы 3dplan.info
L
На сайте с 16.03.2012
Offline
345
lkm
#176
Valum93:
в чём ошибка?

Примерно во всем.

Из этого:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

User-agent: yandex
Allow: /host: archimas.kz

User-agent: User-agent:
Disallow: /wp-includes/

Sitemap: http://archimas.kz/sitemap.xml.gz

Оставить вот это:

User-agent: *
Disallow: /wp-admin

Sitemap: http://archimas.kz/sitemap.xml

А дальше - гуглим по фразе "robots.txt для wordpress" и применяем к своему сайту.

RF
На сайте с 07.04.2008
Offline
158
#177

Надо закрыть все стр. в разделе, но сам раздел оставить

Disallow: /razdel/$

allow: /razdel/

так будет работать?

Станислав Романенко
На сайте с 05.09.2007
Offline
325
#178

Наоборот:

Disallow: /razdel/

Allow: /razdel/$

Сайт не лезет в топ? Сделаю аудит без воды всего за 8000 рублей! Отзывы клиентов тут (https://searchengines.guru/ru/forum/939454), почта для связи: ingref@ya.ru Посмотрю, в чём проблема с вашим сайтом, за 100 рублей (https://searchengines.guru/ru/forum/comment/15662080).
NikitoZZ
На сайте с 04.04.2007
Offline
208
#179

В вебмастере не забудьте проверить.

Инструменты\Анализ robots.txt

A
На сайте с 05.04.2018
Offline
4
#180

Подскажите что не так.

в

robots.txt

Disallow: /*?disallow=mobile

Disallow: /*?page=

а в поиску мне выдает

под

site:https://aksmir.com.ua/toplivnyiy-filtr/

Мы скрыли некоторые результаты, которые очень похожи на уже представленные выше (40).

и там

https://aksmir.com.ua/toplivnyiy-filtr/bmw/1/?disallow=mobile

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий