Мажордомо не перестает "радовать". См. скриншот, подчеркнутое красным -- время генерации страницы. 😆
Справедливости ради, такая картина наблюдается не всегда, но... 🙅
Garin&Klubok, насчет учета noindex и nofollow, проверки проиндексированности ссылок, а также предссылочного, послессылочного текста и т.д., это, конечно, вопросы отдельные.
Но если исходить только из вашего вопроса в первом сообщении темы (список всех внешних ссылок сайта с анкорами и страницами, на которых эти ссылки стоят) то пользуйтесь Xenu.
Я отвечал на подобный вопрос в прошлом году. :)
/ru/forum/comment/1745551
Вообще-то профили пользователей надо закрывать от индексации в robots.txt -- и пусть роботы оставляют адреса своих сайтов, сколько им захочется.
Один из вариантов роботса для phpbb:
User-agent: *
Disallow: /admin/
Disallow: /db/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /templates/
Disallow: /common.php
Disallow: /config.php
Disallow: /faq.php
Disallow: /groupcp.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /modcp.php
Disallow: /posting.php
Disallow: /privmsg.php
Disallow: /profile.php
Disallow: /search.php
Disallow: /viewonline.php
http://webmaster.yandex.ru/wmconsole/?invitation=470e0d4ab0821b33
http://webmaster.yandex.ru/wmconsole/?invitation=72f5cca6da237fff
http://webmaster.yandex.ru/wmconsole/?invitation=63da9372bf7edf5d
http://webmaster.yandex.ru/wmconsole/?invitation=460a8a39377d4d34
http://webmaster.yandex.ru/wmconsole/?invitation=5869b6674a28dd5d
Пользуйтесь :)
http://webmaster.yandex.ru/wmconsole/?invitation=5f0e49093394b349
http://webmaster.yandex.ru/wmconsole/?invitation=57e345724d726e78
http://webmaster.yandex.ru/wmconsole/?invitation=7abd565241c0ce33
http://webmaster.yandex.ru/wmconsole/?invitation=43ea4be886ec8b88
http://webmaster.yandex.ru/wmconsole/?invitation=56d548f680eed6b5
DUPLICATE.RU $710 КУ22
PS. тому, кто держал на этом домене каталог сайтов, а потом не стал продлевать, наверное обидно. :)
А какое отношение аватары имеют к скрипту?
Не проще ли купить движок Invision Power Board или VBulletin? При желании сэкономить можно даже поставить бесплатный, PhpBB (там, правда, вторая версия вроде как устарела, а третья никак не выберется из стадии релиз-кандидатов, уже до rc7 добрались и перспективы пока туманные).
Для Firefox можно поставить оригинальные, скажем так, Яндекс.Бар и "Панель инструментов Google", далее в режиме настройки панелей перетащить в нужное место с первого индикатор ИЦ, а со второго соответственно PR. После этого панели Я. и G. можно сделать не отображаемыми на экране (снять галки).
Преимущество тут в том, что работа идет с оригинальными индикаторами, которые предоставляют сами поисковики, а не с чем-то, что сделано неизвестно кем. Ну и экономия места тоже, два индикатора с отключенными основными панелями много места не занимают.
Там в в таблице надо слева от нужной статьи поставить галочку, а потом снизу нажать кнопку "посчитать статистику".
...Кажется, слишком много заказов ребятам накидали, или мне опять не везет. :)
Заказ висит в статусе "просмотрено переводчиком" (то есть он даже к работе не приступил) уже 2 д 19 ч 40 мин., в нормативные три дня явно не укладываются.
Элементарно: http://www.iwork.com.ua/robots.txt
...и получаем 404
