UPD: Twitter запретил поисковикам индексировать свой контент

Twitter в файле robot.txt запретил поисковым роботам индексировать контент сервиса.

94645.jpg

Тем не менее, запрет не имеет большого значения. Нормальная индексация требует полного доступа к firehose – потоку твитов в режиме, близкому к реальному времени, который уже есть и у Google, и у Яндекса.

Twitter заключил сделку с Google, чтобы облегчить поиск своих 140-символьных обновлений в интернете, в феврале этого года. Соглашение вступило в действие в мае, твиты появились в мобильной выдаче в США. В настоящее время Google индексирует на 466% больше твитов, чем в феврале.

UPDATE: На текущий момент запрет индексации установлен только для контента версии сайта: https://www.twitter.com. Для URL-а без «www» индексация осуществляется прежним образом.

subscribe

Подпишитесь на рассылку SearchEngines

— Статьи мировых экспертов

— Аналитические обзоры

— Важные новости

— Горячие темы с нашего форума

Twitter тестирует новый раздел Related Videos

Пользователи заметили, что Twitter тестирует новый раздел «Похожие видео» (Related Videos) для неавторизированных пользователей веб-версии сервиса

Snapster - новое фотоприложение от ВКонтакте

В магазинах App Store и Google Play стало доступно для скачивания новое фотоприложение от ВКонтакте, позволяющее обрабатывать пользовательские снимки и делиться ими

Новые форматы рекламы и таргетинга в Instagram будут запущены осенью

Осенью этого года Instagram откроет свою рекламную платформу для всех рекламодателей

Chrome будет чаще предупреждать пользователей о переходе на опасные сайты

Google объявил, что в ближайшее время пользователи будут чаще видеть предупреждения о переходе на потенциально опасные сайты, подозреваемые в фишинге или распространении...

Google Inbox позволил отложить на удобное время письма, требующие действий

Разработчики почтового сервиса Google Inbox улучшили функционал откладывания писем

Twitter позволил разработчикам протестировать отправку и получение длинных сообщений в приложениях

В Twitter появился новый бот @LongDMBot, позволяющий разработчикам протестировать отправку и получение длинных личных сообщений в своих приложениях