Сделать все можно, но прежде, стоит подумать головой и почитать правила.
Да уж... Читал предыдущую тему. Вот из-за подобных случаев перестаешь верить людям и в людей, которых не знаешь в реале.
ТС, вы реально не понимаю что это как глум выглядит над теми, кто вам деньги дал?
C этим согласен, по себе знаю :)
Lupus, абсолютно согласен! :)
Может конечно из Молдавии видно лучше, но мне, в России, такая молодежь не встречалась. И я не очень понимаю какой историей эта молодежь может гордится, если она ее вообще не знает. Может конечно в институте где я наблюдаю эту молодежь постоянно, она особенная, но врядли. Да и сам вроде тоже не старый, не могу сказать горжусь своей страной, вот реально, как бы не резало это слух. Чем гордится, не понимаю.
Не знаю как сейчас, но в начале девяностых моей бабушке говорили - "чемодан, вокзал, Россия". В итоге ее экстренно пришлось перевозить в Россию, т.к. русских тогда прессовали не на шутку. Если в квартиру к русским ломились бандиты, то полиция на такие вызовы просто не реагировала, типа нехер тебе, русской, жаловаться. Не пытаюсь разыграть национальную карту, но эта информация не от абстрактных знакомых (не в вашу сторону упрек).
Что касается благосостояния, в Италии почти в каждом ресторане можно наткнуться на молдаван, и обратно они не собираются. Буквально пару месяцев назад общался с одной официанткой, нелегальное положение в Италии ее больше устраивает, чем легальное в Молдавии. Ибо работы в Молдавии нет. Конечно, на одном примере делать выводы не правильно, но я еще знаю что например, пенсионерам в Молдавии живется прилично хуже чем нашим.
klaingev, т.е. уже стали крутым веб мастером? :D А вокруг ламеры, несомненно.
semenov, как бы стандарты так, ради прикола придумывают, ага?
Ну почему же? Вот выдержка:
http://www.robotstxt.org/orig.html
Я конечно не супер знаток английского, но слова visit и index имеют разные значения, и если верить упомянутой выше ссылки, то роботы не должны именно шариться, а не просто не вносить страницы в индекс. Поправьте если в чем-то не прав.
BrokenBrake, от вашего согласия, ничего не меняется. У меня в дополнительных ссылках сайта висит страница, которая закрыта в robots.txt и закрыта давно. То что бот шарится по сайту, в том числе и по закрытым страницам, для вас новость? Да, в индексе такие страницы скорее всего не появятся, но шарится он все равно будет.