robots.txt

12
[Удален]
1037

добрый день

Я особо не шарю, но кто может просветить меня как редактировать этот фаил

Хочу попробо1вать сайт поднять,но никогда не занимался этим

собсна вопрос

В Яндекс.Вебмастер в настройках индексации выбираю Анализ robots.txt И жму поверить

выбивает вот это

User-agent: *

Disallow: /engine/go.php

Disallow: /user/

Disallow: /newposts/

Disallow: /statistics.html

Disallow: /*subaction=userinfo

Disallow: /*subaction=newposts

Disallow: /*do=lastcomments

Disallow: /*do=feedback

Disallow: /*do=register

Disallow: /*do=lostpassword

Disallow: /*do=addnews

Disallow: /*do=stats

Disallow: /*do=pm

так должно быть ? что необходимо в нем редактировать. Нет желающих объяснить тут или в аське ( в личку) . Очень нужно

m_valeriy
На сайте с 24.10.2007
Offline
96
#1
[Удален]
#2

Warning at line number

И дофига цифр

В этот список постоянно нужно добавлять ссылки на новые статьи которые я добавляю или нет?

Disallow - отключение ?

Fat Bear
На сайте с 01.12.2006
Offline
264
#3

m_valeriy, ну вот зачем ты народ смущаешь всякими ссылками, которые ерунду показывают? :)

Этот чекер наших-то команд не понимает...

el.fieZ, читайте и просвещайтесь. А то сейчас нагородите ссылок в файле :)

Открыть счёт в Capitalist ( https://capitalist.net/reg?from=e5707ff0c3 ). Виртуальные карты, USDT, банковские переводы, выплаты партнёрских программ. Push-партнёрка с высоким рейтом hClicks(https://hclicks.com/?ref=61dc0714).
[Удален]
#4

эх. походу я нуб нубомом и останусь , читаю сейчас кучу статей и не врубаюсь ((

ower_xz
На сайте с 20.11.2007
Offline
45
#5
m_valeriy:
el.fieZ, Robots.txt syntax checker

Странный сервис... Пример:

Warning at line number 6:
Disallow: /*subaction=userinfo

Wildcards aren't supported. Wildcards such as '*', '.' and '?' aren't supported. For example instead of writing Disallow: /foo.* you should just write Disallow: /foo

У них получается, запрещены символы '*', '.' и '?' в роботсе. А в вебмастере гугла, например, при составлении роботса эти символы используются.

Лично я больше гуглу доверяю...

el.fieZ:
читайте и просвещайтесь. А то сейчас нагородите ссылок в файле

Кстати, верное замечание..

m_valeriy
На сайте с 24.10.2007
Offline
96
#6

el.fieZ, Когда я чего-то не знаю, появляется дикое желание это узнать. Вбиваю запрос в гугл/яндекс и о чудо! Эти сволочи знают всё! Риальне!

robots.txt

[Удален]
#7
m_valeriy:
el.fieZ, Когда я чего-то не знаю, появляется дикое желание это узнать. Вбиваю запрос в гугл/яндекс и о чудо! Эти сволочи знают всё! Риальне!
robots.txt

Ну как бы я не просто так задал вопрос, если действительно не мог найти или понять.

Не любитель светиться где нибудь с глупыми вопросами и вообще...

m_valeriy
На сайте с 24.10.2007
Offline
96
#8

Масол, А я чо? Ничо, абсолютно. Нормальный такой сервис, буржуйский.

И мне в пишет:

Warning at line number 20:

Crawl-delay: 10

Unrecognised field. The field Crawl-delay could not be recognised. Whilst the robots.txt standard allows for expansion by the use of undefined fields, it is likely that this line is a mistake in your file

No errors found! - это самое главное :)

[Удален]
#9
Масол:
m_valeriy, ну вот зачем ты народ смущаешь всякими ссылками, которые ерунду показывают? :)
Этот чекер наших-то команд не понимает...

el.fieZ, читайте и просвещайтесь. А то сейчас нагородите ссылок в файле :)

спасибо Вам )

el.fieZ добавил 02.08.2011 в 00:58

и все таки я болван

Если о\ст3авить все как в первом посте моем то все в порядке тогда?)

m_valeriy
На сайте с 24.10.2007
Offline
96
#10

el.fieZ, Disallow: на те папки/разделы которые требуется закрыть (по умолчанию открыты) или Allow: - открыть.

Папки/разделы/файлы выбрать самому, у каждого своя параноя.

А в тех ссылках, что давали выше всё есть.

el.fieZ:
Если о\ст3авить все как в первом посте моем то все в порядке тогда?
тогда да :)
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий