- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Приветствую!
Есть форум, на несколько разделов и в каждом множество страниц с темами.
Каждая страница раздела отличается последним числом.
http://названиефорума.ru/forum3-20.html
http://названиефорума.ru/forum3-40.html
http://названиефорума.ru/forum3-60.html
Когда добираешся до конца списка тем, то дальше нет ссылок естественно на несуществующие страницы.
Но если ввести несуществующую страницу раздела например http://названиефорума.ru/forum3-400000000.html,
то откроется страничка с 404й ошибкой с нашим заголовком.
В общем Яндекс только и делает что сканирует в бесконечность эти несуществующие страницы разделов, причем добавляет в индекс(!) и спустя какое то время избавляется от них.
Вот для примера 404я страница нашего сайта.
http://sysadmins.ru/forum3-88320.html
Видно что код выдается верный - 404 в заголовке. То есть яндекс не может сказать что это обычная страница, и самое главное - ссылок на всё это нет нигде(!) ваабще. Он просто выдумывает как будто инкременты до бескнечности. Помогите плз!
:beer::beer::beer:
Плохо 404 отдает...
При первой же проверке 301 -> 200
Зайдите сюда https://webmaster.yandex.ru/site/links/internal/ и проверьте, нет ли там этих ваших урлов.
Плохо 404 отдает...
При первой же проверке 301 -> 200
А чем проверять? Искал просто в гугле - "проверка заголовков html" и все проверки показывли 404.
😕
---------- Добавлено 26.09.2019 в 15:45 ----------
Зайдите сюда https://webmaster.yandex.ru/site/links/internal/ и проверьте, нет ли там этих ваших урлов.
Ого хорошая ссылка,но там всего 500 таких документов и датируются мартом и там и правда есть проблемные странички со ссылками на несуществующие. Но яндекс каждый день по 300 новых накидывает и их тут нет. Искал еще на гугле тоже с тегом site: Нету на сайте нигде ссылок на несуществующие страницы точно.
Вот для примера 404я страница нашего сайта.
http://sysadmins.ru/forum3-88320.html
Видно что код выдается верный - 404 в заголовке.
Не там отдаете 404, а реальный код, как отметила уже Nadejda - не 404
Код статуса HTTP 301 Moved Permanently
Время ответа сервера 4 мс
IP сайта 95.215.110.66
Кодировка UTF-8(unicode-1-1-utf-8, UTF8)
Размер страницы 178 Б
Не так обрабатывать надо 404, не 301 редиректом, иначе будет иметь то, что имеете
Ого хорошая ссылка,но там всего 500 таких документов и датируются мартом и там и правда есть проблемные странички со ссылками на несуществующие. Но яндекс каждый день по 300 новых накидывает и их тут нет.
Ну так зачем вам все? Вы посмотрите, откуда эти 500 берутся и по аналогии найдите остальные.
Не там отдаете 404, а реальный код, как отметила уже Nadejda - не 404
Не так обрабатывать надо 404, не 301 редиректом, иначе будет иметь то, что имеете
Сорри я написал ссылку с http на самом деле ссылка https://sysadmins.ru/forum3-88320.html
А там 301 потому что на https перекидывает. Сорри.
Не нашел "правки" в первом сообщении :(
---------- Добавлено 26.09.2019 в 19:15 ----------
Ну так зачем вам все? Вы посмотрите, откуда эти 500 берутся и по аналогии найдите остальные.
Имею ввиду там реально 500 документов с ошибочными урлами, но разными, не этими копиями страниц с разным номером. Там просто разные ссылки на удаленные темы и еще чтото. А этих ссылок тут нету тоже.
Сорри я написал ссылку с http на самом деле ссылка http://sysadmins.ru/forum3-88320.html
А там 301 потому что на https перекидывает. Сорри..
В вебмастере есть Инструменты - Проверка ответа сервера
А, там 8 роботов яндекса, проверяете все, а не только одного
У меня ссылка, не только 200 была помечена, но и в индексе была. И не удалить дубль страницы.
Первый основной робот показывал правильный ответ сервера 301 - а страница в вебмастере 200 и в индексе,
Было перелопачено все! Пока случайно не запросили остальных 7 роботов - а все остальные показали 200
Причина плагин кэширования, просто заменили на другой
В вебмастере есть Инструменты - Проверка ответа сервера
А, там 8 роботов яндекса, проверяете все, а не только одного
У меня ссылка, не только 200 была помечена, но и в индексе была. И не удалить дубль страницы.
Первый основной робот показывал правильный ответ сервера 301 - а страница в вебмастере 200 и в индексе,
Было перелопачено все! Пока случайно не запросили остальных 7 роботов - а все остальные показали 200
Причина плагин кэширования, просто заменили на другой
Благодарю!
Вот прогнал https через все роботы все одно и тоже показали. Вот.
Но если проверять http то тут конечно 301, но так и было задумано и это рекомендует яндекс при переезде на https. Проверил ни один робот 200 не показывет.
Имею ввиду там реально 500 документов с ошибочными урлами, но разными, не этими копиями страниц с разным номером. Там просто разные ссылки на удаленные темы и еще чтото. А этих ссылок тут нету тоже.
У Гугла есть аналогичный раздел https://search.google.com/search-console/links - там под внутренними ссылками нажимаете "Дополнительно", ищите ваши урлы, и если они там есть, то по нажатию появляется список страниц, откуда на них есть ссылка.
У Гугла есть аналогичный раздел https://search.google.com/search-console/links - там под внутренними ссылками нажимаете "Дополнительно", ищите ваши урлы, и если они там есть, то по нажатию появляется список страниц, откуда на них есть ссылка.
Очень много интересного нашел, но тех ссылок там нет. :(
Что делать то? отключать редирект с http? но тогда как людей на https переводить? Или избавлятся от 404х страниц своих? 😡