Пошется собственный JS, который с задержкой парсит блок <div id="mneniyapro_feed"></div> и с помощью ajax сливает в бэкграунде информацию на ваш сервер в вашу базу. На вашем сервере ставите скрипт-приемник (обычный обработчик post-запросов).
Скрипт подсовываете случайному посетителю раз в день/неделю, таким образом получаете обновление своей базы. Всем остальным посетителям и поисковым ботам выводите настоящий индексируемый текст уже из своей базы.
Позаботьтесь о защите скрипта-приемника от автоматического постинга злоумышленниками.
elitedesign: Что можно сделать, чтобы новые урлы проиндексировались максимально быстро
мне помогало создание sitemap.xml с актуальными URL и датой последнего изменения, с последующим скармливанием этой sitemap через яндекс.вебмастер.
elitedesign: а старые выпали бы из поиска (и нужно ли чтобы они выпали из поиска)?
Если новые URL содержат такую же информацию, что и старые (т.е. одна и та же статья но на новом URL), то совет от Dukalis про 301-й редирект вполне уместен, сам тоже так делаю.
Если же старые статьи мне больше не нужны, то я проверяю, чтобы по их адресам отдавался 404-й код, тогда они достаточно быстро уходят из индекса.
Unlock, проблема в том, что ГГЛ отправляют оригиналы актов, а оригиналы договоров - не отправляют. Если вы внимательно посмотрите на свой биллинг, то увидите, что на каждый новый счет формируется договор с новым номером.
И да, бывает, что даже оригиналы актов не доходят. В этом случае делаем повторный запрос через ТП.
---------- Добавлено 14.04.2014 в 11:28 ----------
SSA.RU, порой мне кажется, что пора на почтовом отделении абонировать ячейку с именем "Спам", может хоть туда корреспонденция будет доходить...
За два года, в течение которых мы являемся вашими клиентами, вы так и не научились отправлять вместе с актом выполненных работ и оригинал договора на безналичную оплату.
Хотел было обсудить этот вопрос приватно, но не могу отправить Вам ЛС (может "репы" не хватает). Вне форума с Вами как-то можно связаться?
Рискну предложить такое решение.
Пошется собственный JS, который с задержкой парсит блок <div id="mneniyapro_feed"></div> и с помощью ajax сливает в бэкграунде информацию на ваш сервер в вашу базу. На вашем сервере ставите скрипт-приемник (обычный обработчик post-запросов).
Скрипт подсовываете случайному посетителю раз в день/неделю, таким образом получаете обновление своей базы. Всем остальным посетителям и поисковым ботам выводите настоящий индексируемый текст уже из своей базы.
Позаботьтесь о защите скрипта-приемника от автоматического постинга злоумышленниками.
Что можно сделать, чтобы новые урлы проиндексировались максимально быстро
мне помогало создание sitemap.xml с актуальными URL и датой последнего изменения, с последующим скармливанием этой sitemap через яндекс.вебмастер.
а старые выпали бы из поиска (и нужно ли чтобы они выпали из поиска)?
Если новые URL содержат такую же информацию, что и старые (т.е. одна и та же статья но на новом URL), то совет от Dukalis про 301-й редирект вполне уместен, сам тоже так делаю.
Если же старые статьи мне больше не нужны, то я проверяю, чтобы по их адресам отдавался 404-й код, тогда они достаточно быстро уходят из индекса.
Unlock, проблема в том, что ГГЛ отправляют оригиналы актов, а оригиналы договоров - не отправляют. Если вы внимательно посмотрите на свой биллинг, то увидите, что на каждый новый счет формируется договор с новым номером.
И да, бывает, что даже оригиналы актов не доходят. В этом случае делаем повторный запрос через ТП.
---------- Добавлено 14.04.2014 в 11:28 ----------
SSA.RU, порой мне кажется, что пора на почтовом отделении абонировать ячейку с именем "Спам", может хоть туда корреспонденция будет доходить...
Т-34, здравствуйте!
За два года, в течение которых мы являемся вашими клиентами, вы так и не научились отправлять вместе с актом выполненных работ и оригинал договора на безналичную оплату.
Хотел было обсудить этот вопрос приватно, но не могу отправить Вам ЛС (может "репы" не хватает). Вне форума с Вами как-то можно связаться?
DNS-сервера мастернейма не работают. Соответственно доменные имена не резолвятся, сайты не открываются.