- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Начал сейчас анализ одного конкурентного сайта, который практически по всеми интересующим меня запросам держится на 1 месте. Сначала посмотрел на внутреннюю оптимизацию, и с самого начала меня смутил robots.txt.
Он выглядит вот так:
Disallow: /index.php
Disallow: /send.php
Disallow: /includes/
Disallow: /search
Disallow: /mainpage/
User-agent: Yandex
Disallow: /index.php
Disallow: /send.php
Disallow: /includes/
Disallow: /search
Disallow: /mainpage/
Host: *******.com
Здесь закрыта от индексации главная страница index.php что ли? То, что главная именно index.php, а не index.html и прочее, я проверил.
Конечно, может быть в htaccess прописана стартовая страница с совершенно другим именем, а это сделано, чтобы сбить таких как я с толку, но мало ли.
Не, главная страница - это www.site.ru/ , а www.site.ru/index.php - ее дубликат.
на самом деле главная странитца не закрыта, поскольку она имеет УРЛ вида www.site.com, а закрыта страница вида www.site.com/index.php - скорее всего она является дублем главной страницы поетому ее и закрыли.
Все ясно.
Это как с поддоменами - закрываем от индексации папку, в которой поддомен лежит.
Спасибо