- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Коллеги, прошу помощи.
Для клиента программист сделал тестовый сайт на поддомене test.site.ru и через какое то время test попал в индекс.
Удалил все страницы включая index.php, прописал в robots
Disallow: /
User Agent: *
Disallow: /
Но яндекс до сих пор видит сайт - прошло около месяца. Что делать?
Вторая часть вопроса
На основном сайте страниц, которых больше не существует выводится текст "страницы больше нет" и отдаёт код 404. Но данные страницы находятся в индексе и не выпадают уже около 3-х месяцев. Что сделать чтобы яндекс забыл о ненужных страницах?
Спасибо
Коллеги, прошу помощи.
Для клиента программист сделал тестовый сайт на поддомене test.site.ru и через какое то время test попал в индекс.
Удалил все страницы включая index.php, прописал в robots
Но яндекс до сих пор видит сайт - прошло около месяца. Что делать?
Вторая часть вопроса
На основном сайте страниц, которых больше не существует выводится текст "страницы больше нет" и отдаёт код 404. Но данные страницы находятся в индексе и не выпадают уже около 3-х месяцев. Что сделать чтобы яндекс забыл о ненужных страницах?
Спасибо
У вас сервер точно 404 отдает? Я именно спрашиваю про ответ сервера, а не про то, какая страница открывается по ссылке.
У вас сервер точно 404 отдает? Я именно спрашиваю про ответ сервера, а не про то, какая страница открывается по ссылке.
Точно
http://webmaster.yandex.ru/delurl.xml
http://webmaster.yandex.ru/delurl.xml
около 1000 страниц... с капчей это жесть.
А что по поводу поддомена? Достаточно ли было всё снести и выставить в роботс disallow?
около 1000 страниц... с капчей это жесть.
А что по поводу поддомена? Достаточно ли было всё снести и выставить в роботс disallow?
Если войти в аккаунт яндекса, то капчи нет. Но 1000 страниц все равно жесть, да)
Так то достаточно должно быть, но смотрите, возможно на поддомен ссылки есть внешние или с самого домена, тогда никакой disallow и delurl не поможет, у меня была такая история. Только ссылки убирать тогда. Больше не знаю что посоветовать.
Обрати внимание на директиву - User Agent, это неправильно, правильно - User-agent, причина в этом.
http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml
Спасибо. Справился с убийством страниц вручную - их оказалось всего 170 штук.
Спасибо за "User-Agent".
Справился с убийством страниц вручную - их оказалось всего 170 штук.
да вы молодец, помучались однако))
а про User-agent тоже запомню, мало ли пригодится!