burunduk, ну это вроде как другой вопрос, к разработчикам. Нет страницы - вставляй запрет в мета-роботс страницы, поскольку разрешил всё индексить в файле.
На самом деле я полностью согласен с мнением, что если кто-то суётся в столь технологичную область как интернет и поисковики - должен разбираться как устроен этот мир или нанять специалистов. Это например касается претензий Мегафона к Яндексу и фотографов, которые увидели свои авторские фотки в результатах поиска. Но то что предлагаю - с точки зрения оффлайновых понятий более логично. Владелец сайта должен чтото сделать чтобы проиндексироваться, тогда он не сможет предъявлять претензии о том, что проиндексировалось лишнего. Например, если судить ну очень строго - Мегафон прав, он не давал разрешения индексировать раздел с смсками. Другое дело, что мир устроен не так и Мегафон прекрасно в курсе, как и владельцы интернет-магазинов.
burunduk: и как вы разрешите индексировать несколько лямов страниц той же вики?
Так же как сейчас запрещается к индексации весь сайт. Это тот же вопрос, что с авторскими правами. Вы не должны делать что-то чтобы запретить заимствование у вас контента, пусть и в благих целях. Написал Allow: / = разрешил индексировать всё что есть. Удалил гениальный админ мегафона роботс - мегафон пропал из индекса. И никто не скажет что проиндексились картинки с авторскими правами.
Роботс имеет запретительную систему, а по идее должен бы иметь разрешительную. Сейчас запрещено точто указано, а должно быть наоборот: всё что в файле явно не разрешено к индексированию - запрещено. Тогда не могло быть претензий к пс вообще, правда поисковая база была бы поменьше. К сожалению, идея видимо запоздала годков на 20+...
Да интернет тут вообще ни при чём, нужно слить денег кому-то заранее договоренному, он же (будущий победитель) скорее всего и составлял условия тендера (входит в стоимость). Спектакль чистой воды, как и все остальные конкурсы.
Перенос на другой домен, дмоза жалко но что делать. Если кто-то рассказывал на форуме реальную историю, как сайт получилось вытащить из под АГС не меняя самого сайта - покажите, вроде не встречалось.
Вот интересный случай: есть один гээсик, попал года 2 назад в бан. Тут ктото писал про вывод из бана ссылками, попробовал тоже - получилось. Но не надолго, прошло пара недель и сайт получил АГС. За эти месяцы что он там сидел на нём прочистились тексты (были ошибки, много), добавился контент. Структура немного поменялась, стала неоднообразная как прежде. Нифига. Потом в очередной раз вспомнил о нём и скинул его на другой домен, внутрь другого сайта целиком как есть, на самом сайте поставил 301. И вот самое интересное - через неделю-две в очередной апдейт сайт вылез в индекс Яндекса, целиком, около 800 страниц. В этот момент со всех этих страниц уже давно перекидывало хтаксессом на другой сайт. Видимо Яндекс понял, что с этим сайтом он больше не увидится и отпустил ему все грехи ))) Теперь у меня мысль, а если я вдруг решил бы снять редирект?..
Есть такая проблема, Яндекс всё чаще на первые строчки выдвигает более крупные старые сайты, ущемляет мелкие. Про полезность бред, более качественный материал на новом сайте всёравно будет в жопе, а менее полезный на крупном в топе, хотя ранжируются вроде как документы, а не сайты. И никакая полезность тут ни при чём.
burunduk, ну это вроде как другой вопрос, к разработчикам. Нет страницы - вставляй запрет в мета-роботс страницы, поскольку разрешил всё индексить в файле.
а как же тогда различные уязвимости?
Например? :)
На самом деле я полностью согласен с мнением, что если кто-то суётся в столь технологичную область как интернет и поисковики - должен разбираться как устроен этот мир или нанять специалистов. Это например касается претензий Мегафона к Яндексу и фотографов, которые увидели свои авторские фотки в результатах поиска. Но то что предлагаю - с точки зрения оффлайновых понятий более логично. Владелец сайта должен чтото сделать чтобы проиндексироваться, тогда он не сможет предъявлять претензии о том, что проиндексировалось лишнего. Например, если судить ну очень строго - Мегафон прав, он не давал разрешения индексировать раздел с смсками. Другое дело, что мир устроен не так и Мегафон прекрасно в курсе, как и владельцы интернет-магазинов.
и как вы разрешите индексировать несколько лямов страниц той же вики?
Так же как сейчас запрещается к индексации весь сайт. Это тот же вопрос, что с авторскими правами. Вы не должны делать что-то чтобы запретить заимствование у вас контента, пусть и в благих целях. Написал Allow: / = разрешил индексировать всё что есть. Удалил гениальный админ мегафона роботс - мегафон пропал из индекса. И никто не скажет что проиндексились картинки с авторскими правами.
Роботс имеет запретительную систему, а по идее должен бы иметь разрешительную. Сейчас запрещено точто указано, а должно быть наоборот: всё что в файле явно не разрешено к индексированию - запрещено. Тогда не могло быть претензий к пс вообще, правда поисковая база была бы поменьше. К сожалению, идея видимо запоздала годков на 20+...
Да интернет тут вообще ни при чём, нужно слить денег кому-то заранее договоренному, он же (будущий победитель) скорее всего и составлял условия тендера (входит в стоимость). Спектакль чистой воды, как и все остальные конкурсы.
Перенос на другой домен, дмоза жалко но что делать. Если кто-то рассказывал на форуме реальную историю, как сайт получилось вытащить из под АГС не меняя самого сайта - покажите, вроде не встречалось.
Вот интересный случай: есть один гээсик, попал года 2 назад в бан. Тут ктото писал про вывод из бана ссылками, попробовал тоже - получилось. Но не надолго, прошло пара недель и сайт получил АГС. За эти месяцы что он там сидел на нём прочистились тексты (были ошибки, много), добавился контент. Структура немного поменялась, стала неоднообразная как прежде. Нифига. Потом в очередной раз вспомнил о нём и скинул его на другой домен, внутрь другого сайта целиком как есть, на самом сайте поставил 301. И вот самое интересное - через неделю-две в очередной апдейт сайт вылез в индекс Яндекса, целиком, около 800 страниц. В этот момент со всех этих страниц уже давно перекидывало хтаксессом на другой сайт. Видимо Яндекс понял, что с этим сайтом он больше не увидится и отпустил ему все грехи ))) Теперь у меня мысль, а если я вдруг решил бы снять редирект?..
Детективный сюжет походу. На самом деле убийца - дизайнер. К концу фильма возможно выяснится что это вы украли дизайн, просто ещё не знаете об этом ;)
И слепым пользователям особенно пригодится
Луший отжиг недели
Периодичность апов может быть частично завязана на количество поисков. Меньше активность пользователей - реже ищут - реже апы.
Есть такая проблема, Яндекс всё чаще на первые строчки выдвигает более крупные старые сайты, ущемляет мелкие. Про полезность бред, более качественный материал на новом сайте всёравно будет в жопе, а менее полезный на крупном в топе, хотя ранжируются вроде как документы, а не сайты. И никакая полезность тут ни при чём.