- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Сложилась такая ситуация, что большую часть страниц Яндекс не захотел проверять сославшись на robot.txt Подскажите что делать? Я не чего не менял, а страницы не индексирует. Что не так? Или так надо, тогда зачем и что это за года в файле?
Всего 10 и 50 это как же так.
Страниц в поиске 10
Внешних ссылок на страницы сайта 201
Дата последнего посещения сайта роботом 4.12.2012
Загружено роботом 50
Исключено роботом 37
А вот и сам robot.txt (а то у меня картинки не показывает)
User-Agent: Mediapartners-Google*
Disallow:
Sitemap: http://www.livejournal.com/sitemap.xml
User-Agent: *
Disallow: /data/foaf/
Disallow: /tag/
Disallow: /friendstimes
Disallow: /calendar
Disallow: /1999/
Disallow: /2000/
Disallow: /2001/
Disallow: /2002/
Disallow: /2003/
Disallow: /2004/
Disallow: /2005/
Disallow: /2006/
Disallow: /2007/
Disallow: /2008/
Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Sitemap: http://www.livejournal.com/sitemap.xml
Уверены, что это Ваш сайт?
robot.txt
robots.txt
Уверены, что это Ваш сайт?
robots.txt
Ну конечно не мой. Но это все по умолчанию стояло, где то написано было, что этот файл не надо менять когда блог на ЖЖ. Что все само. Были вставлены только мета тэги. Для индексации.
Эм, разве в ЖЖ можно менять sitemap?
Про S понятно, ошибочка вышла.
Какой однако загадочный вопрос...
Какой однако загадочный вопрос...
Почему? Что не так? Пора стреляться?
Alexis_mac, у Вас на livejournal блог?
Думаю на сайте закрыто от индексации все, кроме главной страницы (закрыты архивы постов Disallow: /1999/... Disallow: /2000/...Disallow: /2001/ и т.д). Точнее можно сказать после просмотра самого блога (ссылкой в ЛС например).
Alexis_mac, у Вас на livejournal блог?
Думаю на сайте закрыто от индексации все, кроме главной страницы (закрыты архивы постов Disallow: /1999/... Disallow: /2000/...Disallow: /2001/ и т.д). Точнее можно сказать после просмотра самого блога (ссылкой в ЛС например).
Да на livejournal.
Кроме главной открыты и другие.
Аморальный инструктор
forever-smil.livejournal.com/
Аморальный инструктор - Кто на что горазд?
forever-smil.livejournal.com/3086.html
forever_smil - User Profile
forever-smil.livejournal.com/profile
Аморальный инструктор - Чем катамаран хуже?...Куда только не заведет...
forever-smil.livejournal.com/6956.html?thread=35628&
Аморальный инструктор - Чем катамаран хуже?...Куда только не заведет...
forever-smil.livejournal.com/6956.html?thread=35628***t35628
Аморальный инструктор - 10 причин заняться сексом
forever-smil.livejournal.com/4695.html?thread=14167***t14167
Аморальный инструктор - 10 причин заняться сексом
forever-smil.livejournal.com/4695.html?thread=14167&
Ну это я несколько только кинул. Есть еще. В общем он их индексирует.
forever-smil.livejournal.com/3460.html
forever-smil.livejournal.com/5031.htm
Тоже от туда только без названий.
Что делать?
Друзья, тема остается открытой, подскажите как быть то!
Alexis_mac, у вас в блоге 10 записей, вот они десять (а может что-то другое) в индексе. Конкретно посты в роботсе не запрещены, больше индексировать по сути нечего, что вам еще нужно? Там и 200 станиц разного рода мусора может быть загружено, от этого суть не меняется.
Так он что индексирует последние 10 записей блога? Общее число записей в блоге, 25.
Добавил пару ссылок в аддурилку Яндекса, через недельку-две проверьте эту http://forever-smil.livejournal.com/7577.html на проиндексированность. Если она появится, то посоветовал бы сделать sitemap на стороннем сервисе и скормить её яндексу.
Сколько времени существует блог?