netcat?
правила в robots.txt помогут, но всегда лучше удалять дубли на корню.
у меня аналогичный конфиг с Quad Q6600 и 4гб памяти, пока винт не поменял пару лет назад на SSD - система забивалась. Сейчас летает.
q6600 очень мощный проц, практически сравним с прошлым поколением i3. А вот винты, остались практически еще с времен когда они были объемом по 500мб-1 гигабайт, и по той же технологии доросли до 1 терабайта. Так что однозначно - только как хранилище под файлы.
Search Console -> Поисковой трафик -> ссылки на ваш сайт
все верно, звездочку после mr можно не ставить. Выше постом объяснял почему.
Если не отличаются, то нет необходимости.---------- Добавлено 21.05.2015 в 13:54 ----------
Правильная для закрытие папки: Disallow: /go-shop/
Disallow: /go-shop/
Disallow: /go-shop/*
идентичные, *-подставляется автоматически
Disallow: /go-shop
- закроет еще и /go-shop-любой текст
Будет показываться.
делал на сайт без 00 - показывается.
есть только пользовательский поиск google, вероятно на его основе и подсчитывает, но не факт.
webmaster.yandex.ru -> Индексирование сайта -> входящие ссылки, аналогично в google webmaster tools.
В Google хроме режим инкогнито, Ctrl+shift+n
В браузерах отличаться не будет,
а вот с xml будет, https://xml.yandex.ru/test/
думаю надо перенести тему в частные вопросы
А что конкретно не поняли? Сохраненку смотреть в выдаче через треугольник, либо поставьте плагин, например RDS-bar. Прогнать можно сервисами, напишите тут в поиске getbot или wmsn, я ими пользуюсь.