wwwwww

wwwwww
Рейтинг
195
Регистрация
29.04.2011

Это к программистам, нужно настраивать роуты и отдавать 404 на несуществующую страницу.

У Вас что, экзотический движок?

Not found<!DOCTYPE html>
<html>
<head>

Такой г-но код.

За взрослый контент, Яндекс может наложить соотвествущий фильтр - уйдете из общей выдачи (по умолчанию поиск настроен на "умеренный фильтр"), сайт будет вроде как в ТОПе, но виден будет только в расширенном поиске.

LMZ:
криминальной стороны

Ну, а по криминалу это к юристам.

MaTuR:
Я это понимаю. но если страница уже создана??? то есть бот заходит по адрессу site.ru/sdfsdfd а там страница "ошибка 404".
Вопрос то в чем создается данная страница на сервере или нет?

Нет такого понятия "страница уже создана". У Вас какая CMS? Нужно смотреть на какие запросы какие ответы выдаются. Это не статичная страница, которую можно взять и удалить, а динамично генерируемый контент. Поищите проблему для Вашей CMS. А лучше задайте вопрос в разделе техпомощи.

Для поисковой системы страницы с кодом 4xx "не существует", и для индексации она непригодна.

/ru/forum/development/web

Diafrag:
Не согласен с этим.

Тогда ищите и читайте, пока не наступит просветеление.

Давно уже пора было нарисовать схему и посмотреть что и как.

Akeli4:
Тем более и тут трафик кушают топ сайты которые в топе по вч.

У Вас первоначальная постановка задачи неверна. "Есть игры и партнерки, как мне засунуть сайт в ТОП?"

Кому он нужен?

Начните так:

"У меня есть куча интересной инфы, полезной, по играм 1,2,3. Нужно найти запросы, по которым эта инфа будет интересна".

denden11:
со сслыкой сквозняком через весь сайт то его в nofollow,

Вес будет утекать. В пустоту.

MaTuR:
ответ сервера на данный адресс 400 то создается страница,

http://ru.wikipedia.org/wiki/%D1%EF%E8%F1%EE%EA_%EA%EE%E4%EE%E2_%F1%EE%F1%F2%EE%FF%ED%E8%FF_HTTP#4xx

Все коды ответа 4xx означают, что произошла ошибка. Такая страница должна быть проигнорирована ПС. Правильнее возварщать 404 код ответа, если страницы нет.

Какой код ответа при наборе адрессайт.ру/robots.txt ?

Викентий:
Просто создали сайт с новыми url, но с тем же содержанием.

А что Вы хотели? Ссылки закупали? Куда они теперь ведут? В пустоту.

Нужно было либо сохранять УРЛ или делать редирект со тсарых УРЛ на новые.

Всего: 2351