вопрос по закрытию лент новостей через ответ сервера 404 / как профилактика АГС

U
На сайте с 24.02.2009
Offline
116
395

В связи с сложившейся ситуацией с попаданием части сайтов под агс. пришел к выводу полностью отказаться от лент новостей. т.е превью и ссылка на статью (у которой начало как превью), как не крути это уже дубль статьи. Раньше думал что раз контент уникальный, то можно глаза на ленты и закрыть.

Но в нынешних реалиях для себя только заметил единственную зацепку - не пострадали только сайты у которых нету ленты новостей. Да и если брать агс. уж очень он часто любит оставлять именно эти ленты. Поэтому решаю сейчас все ленты закрыть. Вот и думаю как лучше сделать. думаю ответ лентам 404 отдавать. Как думаете этого хватит чтобы выкинуть из поиска ленту?

Или можно как то закрыть индексацию ленты через роботс?

просто url вида site.ru/rubtica/url

как можно закрыть /rubtica но при этом оставить открытым site.ru/rubtica/url

Все таки думаю коммерческим сайтам не должно быть свойственны лента аля блог, по такому думаю признаку агс присматривается к сайту.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий