Яндекс не индексирует сайты после перенаправлений с кодами 301 и 302. Об этом он сразу скажет, если попытаться добавить подобный сайт через инструменты вебмастера.
Народ, очень страннно, что это за упомянутое выше предложение (выделено курсивом)? Присутствует во всех поисковых системах для многих ссылок и сайтов.
---------- Добавлено 07.06.2013 в 20:32 ----------
Вроде разобрался, похоже разработчики Bing не позаботились о возможных "коллизиях" при индексации сайтов и правилах в robots.txt.
Если на странице сайта первой попадается запрещённая ссылка в robots.txt (является альтернативой /), то поисковик вместо просмотра остальных дальше не идёт, а в результатах выдачи появляется сообщение выше.
Ничего не мешает, просто хочу понять механизм работы. Ведь для чего-то дана возможность высталять TTL для отдельных записей, хотя в этом случае всё равно придётся обращаться к DNS после их истечения.
Если смотреть через dig, то по истечении TTL для записи A её не видно, а общий TTL продолжает умньшаться.
Серверов несколько, просто не хочется класть вся яйца в одну корзину.
Что касается VPS, то придётся следить ещё за одним хостингом, плюс отказы в обслуживании из-за соседей. Вся проблема в средствах, можно было бы взять colocation, но сейчас это просто расточительство. А требуется просто "тупо" перенаправлять весь трафик.
Наткнулся на провайдера Тенденция (tendence_ru), кто-нибудь сталкивался?
Конфигурация стандартная, взята на хабре "Прозрачное кэширование в nginx для всех и каждого".
Может это из-за кукисов? Стартовая страница устанавливает кукисы, может поэтому и не кешируется?
---------- Добавлено 14.06.2013 в 17:41 ----------
Так и есть, дело было в кукисах. Отдельное спасибо умникам, отнимающим репутацию, видимо, не начто больше не способны.
Тема закрыта.
Яндекс не индексирует сайты после перенаправлений с кодами 301 и 302. Об этом он сразу скажет, если попытаться добавить подобный сайт через инструменты вебмастера.
Host и Sitemap указываются в формате IDN. Если у Вас нет зеркала, то директива Host не нужна.
Что касается РФ, то это правда, в общей валовой индексации они имеют низкий приоритет, подождите месяц.
Кириллические домены нужны России как и отмена зимнего времени.
О, спасибо! Я уже запаниковал, думал конец Рунету.
Тему можно закрыть.
Народ, очень страннно, что это за упомянутое выше предложение (выделено курсивом)? Присутствует во всех поисковых системах для многих ссылок и сайтов.
---------- Добавлено 07.06.2013 в 20:32 ----------
Вроде разобрался, похоже разработчики Bing не позаботились о возможных "коллизиях" при индексации сайтов и правилах в robots.txt.
Если на странице сайта первой попадается запрещённая ссылка в robots.txt (является альтернативой /), то поисковик вместо просмотра остальных дальше не идёт, а в результатах выдачи появляется сообщение выше.
Один VDS, на нём установлена ОС Windows. Linux приводился в качестве примера (отдельного VDS), возможно не совсем удачного.
Если этот файл открыть внутри VDS через браузер, то на это уйдёт всего 15мс. Сетевой порт на 100Мбит/c, антивирусное ПО ещё не ставил.
server {listen 80 default_server;
server_name _;
return 444;
}
Ничего не мешает, просто хочу понять механизм работы. Ведь для чего-то дана возможность высталять TTL для отдельных записей, хотя в этом случае всё равно придётся обращаться к DNS после их истечения.
Если смотреть через dig, то по истечении TTL для записи A её не видно, а общий TTL продолжает умньшаться.
Серверов несколько, просто не хочется класть вся яйца в одну корзину.
Что касается VPS, то придётся следить ещё за одним хостингом, плюс отказы в обслуживании из-за соседей. Вся проблема в средствах, можно было бы взять colocation, но сейчас это просто расточительство. А требуется просто "тупо" перенаправлять весь трафик.
Наткнулся на провайдера Тенденция (tendence_ru), кто-нибудь сталкивался?
Пока речь идёт о веб, т.е. по сути нужен персональный прокси-сервер.
Понимаю, что можно заказать выделенный сервер с IP-адресом, но сам сервер не нужен, поэтому такое решение получается дорогим.