Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

проверка проиндексированности ссылки

A
На сайте с 16.03.2006
Offline
136
asf
653

Здравствуйте!

Есть сайт на котором размещена моя ссылка. Страница на которой размещена моя ссылка, проиндексирована яндексом. И вижу, что текст ссылки тоже проиндекирован. Но как узнать проиндексированна ли сама ссылка (url)? Пробовал через site-auditor, - тот выдает 23000 страниц с сылками на мой сайт, но как определить есть ли в этом списке интересующий меня сайт? Программа которой я проверял наличие ссылки, ругается на robots.txt. Вот его содержимое

User-agent: Mediapartners-Google*
Disallow:

User-Agent: Yandex
Disallow: /search

User-Agent: DISCo Pump, Wget, WebZIP, Teleport Pro, WebSnake, Offline Explorer, Web-By-Mail
Disallow: /

User-agent: Slurp
Disallow: /

User-agent: *
Disallow: /admin.php
Disallow: /admin/
Disallow: /cgi-bin/
Disallow: /U/
Disallow: /Luna/
Disallow: /begun/
Disallow: /reklama/get
Disallow: /modules.php/name/Tayana
Disallow: /modules.php/name/Arts
Disallow: /modules.php/name/Pages
Disallow: /modules.php/name/Your_Account
Disallow: /modules.php/name/Internet
Disallow: /modules.php/name/Downloads
Disallow: /modules.php/name/download
Disallow: /modules.php/name/Multimedia
Disallow: /modules.php/name/G_Book
Disallow: /modules.php/name/Library
Disallow: /modules.php/name/library
Disallow: /modules.php/name/Critique
Disallow: /modules.php/name/Surveys
Disallow: /modules.php/name/Content
Disallow: /modules.php/name/Practika
Disallow: /modules.php/name/Web_Links
Disallow: /modules.php/name/Ezoteric
Disallow: /modules.php/name/Publicism
Disallow: /modules.php/name/Philosophy
Disallow: /modules.php/name/Psychology
Disallow: /modules.php/name/Prose
Disallow: /modules.php/name/Contact
Disallow: /modules.php/name/Art_Tournament
Disallow: /modules.php/name/Art_tournament
Disallow: /modules.php/name/FAQ
Disallow: /modules.php/name/Top_Sites
Disallow: /modules.php/name/coppermine
Disallow: /modules.php/name/FAQS
Disallow: /modules.php/name/Yoga
Disallow: /arts
Disallow: /art
Disallow: /publicism
Disallow: /modules.php/name/image
Disallow: /modules.php/name/poetry
Disallow: /modules.php/name/magic
Disallow: /modules.php/name/prose
Disallow: /modules.php/name/Magics
Disallow: /modules.php/name/Magic
Disallow: /modules.php?name=people
Disallow: /modules.php/name/people
Disallow: /modules.php?name=forum
Disallow: /modules.php/name/forum
Disallow: /modules.php/name/discussion
Disallow: /modules.php/name/multim_video
Disallow: /modules.php/name/pages
Disallow: /modules.php/name/Rewievs
Disallow: /modules.php/name/Images
Disallow: /modules.php/name/News
Disallow: /modules.php/name/Tayana_FAQ
Disallow: /modules.php/name/Feng_Shui
Disallow: /modules.php/name/Forums
Disallow: /modules.php/name/spirituality
Disallow: /modules.php/name/Spirituality
Disallow: /modules.php/name/Multim_Books
Disallow: /modules.php/name/Multim_Video
Disallow: /modules.php/name/Poetry
Disallow: /modules.php/name/NukeJokes
Disallow: /modules.php/name/web_links
Disallow: /modules.php/name/Numerology
Disallow: /modules.php?name=coppermine
Disallow: /modules.php?name=Tayana
Disallow: /modules.php?name=Pages
Disallow: /modules.php?name=Your_Account
Disallow: /modules.php?name=Internet
Disallow: /modules.php?name=G_Book
Disallow: /modules.php?name=Library
Disallow: /modules.php?name=Critique
Disallow: /modules.php?name=Surveys
Disallow: /modules.php?name=Content
Disallow: /modules.php?name=Practika
Disallow: /modules.php?name=Web_Links
Disallow: /modules.php?name=Ezoteric
Disallow: /modules.php?name=Publicism
Disallow: /modules.php?name=Images
Disallow: /modules.php?name=News
Disallow: /modules.php?name=Poetry
Disallow: /modules.php?name=Tayana_FAQ
Disallow: /modules.php?name=Feng_Shui
Disallow: /modules.php?name=Forums
Disallow: /modules.php?name=spirituality
Disallow: /modules.php?name=Spirituality
Disallow: /modules.php?name=Multim_Books
Disallow: /modules.php?name=Multim_Video
Disallow: /modules.php?name=NukeJokes
Disallow: /modules.php?name=Multimedia
Disallow: /modules.php?name=Numerology
Disallow: /modules.php?name=Downloads
Disallow: /modules.php?name=FAQS
Disallow: /modules.php/name/Search
Disallow: /modules.php/name/Top
Disallow: /modules.php/name/modules.php?name=Web_Links
Disallow: /modules.php?name=Search
Disallow: /modules.php/name/modules.php
Disallow: /modules.php/name/Art_Tournir
Disallow: /modules.php/name/Reviews
Disallow: /modules.php?name=Sections
Disallow: /modules.php/name/clicks.php
Disallow: /sun.htm
Disallow: /modules.php/name/poets
Disallow: /modules.php/name/Govorilka

Вот не пойму, есть ли в этом robots.txt запрет на индексацию ссылок?

Цахес
На сайте с 15.03.2007
Offline
205
Цахес
#1
asf:
есть ли в этом robots.txt запрет на индексацию ссылок?

В robots.txt нельзя запрещать индексацию каких-то определённых ссылок.

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).
Киркоров
На сайте с 09.07.2009
Offline
10
Киркоров
#2
Цахес:
В robots.txt нельзя запрещать индексацию каких-то определённых ссылок.

С каких это пор ?)))

/join.html

(с) webmaster yandex - Документ запрещен в файле robots.txt

Найдено по внутренней ссылке 12.07.2009 6.07.2009

Киркоров добавил 17.07.2009 в 13:59

asf:
Здравствуйте!
Есть сайт на котором размещена моя ссылка. Страница на которой размещена моя ссылка, проиндексирована яндексом. И вижу, что текст ссылки тоже проиндекирован. Но как узнать проиндексированна ли сама ссылка (url)? Пробовал через site-auditor, - тот выдает 23000 страниц с сылками на мой сайт, но как определить есть ли в этом списке интересующий меня сайт? Программа которой я проверял наличие ссылки, ругается на robots.txt. Вот его содержимое
Вот не пойму, есть ли в этом robots.txt запрет на индексацию ссылок?

Не переживай всё нормально. Добавляй ссылки какие тебе угодно.

Меньше слов, дешевле телеграмма.
eTarget 2011: Круглый стол Могут ли «плохие» входящие Отчет о конференции User

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий