Флаг G - Сервер выдает статус "410 Gone". В отличие от статуса 403 и 404, которые могут быть временными (по протоколу HTTP), боту сообщается открытым текстом "данная страница не потеряна, а удалена". Недовольный бот голодным возвращается домой.
Кстати, Xenu мне помогла вычислить ссылочки, которые ранее принадлежали вполне нормальным тематическим сайтам, а теперь их домены перехвачен СПАМером..
Вот вам и причинно-следственная связь …
Ps: никак не разобрался как в Xenu отключить, учет внутренних ссылок
hcir: Но если исходить только из вашего вопроса в первом сообщении темы (список всех внешних ссылок сайта с анкорами и страницами, на которых эти ссылки стоят) то пользуйтесь Xenu.
hcir, большое спасибо.
Получилась картина маслом: Xenа показала некоторые страницы от 100 до 1066 Out Links. При открытии этих страниц браузером пользователя и просмотра html кода - ссылок внешних нет.
Что это может означать?
Неправильная настройка, и учет внутренних ссылок, урлов картинок ищу теперь рекомендации/хелп по работе с Xenu
Каталоги сейчас дают 10-40 ТИЦ. Последнее в последнее время видел очень редко.
В начале августа я прогонял сайт через 1ps.ru пакет "ЭЛИТА"
тИЦ упал с 350 -> 250 😂
Это случайно не про этот сайт ведется речь про склейку поддоменов http://www.irta.ru/
ИЦ = 3400 - не в каталоге яндекса
www.irta.fis.ru - ИЦ = 2700 - в каталоге яндекса
livechatr и pivonoff спасибо
Кстати, нашел программку которой пакетно можно преобразовывать кириллицу в 16ые символы
Называется UltraEdit 14.20
Открываешь в ней свой файл, во вкладке Edit выбираешь HEX functions - Hex edit
Потом как выберешь hex edit - текст отобразится в 16-й системе
Копируешь его (через правую кнопку мышки - HEX COPY) и вставляешь в текстовый файл.
А дальше подчищаем все ненужное
Скажите пожалуйста, как запретить сайт к индексации Yahoo и Altavista.
Еще вот такая вещь помогает
Прописать правило в .htaccess
RewriteCond %{HTTP_USER_AGENT} Yahoo [NC,OR]RewriteCond %{HTTP_USER_AGENT} WebAlta [NC]
RewriteRule (.*) - [G,L]
Флаг G - Сервер выдает статус "410 Gone". В отличие от статуса 403 и 404, которые могут быть временными (по протоколу HTTP), боту сообщается открытым текстом "данная страница не потеряна, а удалена". Недовольный бот голодным возвращается домой.
Народ, может я тупой
Но я в аккаунте у ся не заметил "где это берется"
Подскажите будь ласка безграмотному.
Автомат?
так у меня 125x125, 234x60, 250x250
внешние уменьшил до 5.
это не "почистил"
у меня было вообще по 3 ссылки на 8000 проиндексированных страниц сайта.
Всего до 400 ссылок.
Посмотрите причинно-следственную тему: внешние ссылки с собственного сайта
Вам необходимо произвести анализ всех размещенных у вас ссылокна предмет "СПАМа"
Кстати, Xenu мне помогла вычислить ссылочки, которые ранее принадлежали вполне нормальным тематическим сайтам, а теперь их домены перехвачен СПАМером..
Вот вам и причинно-следственная связь …
Ps: никак не разобрался как в Xenu отключить, учет внутренних ссылок
поэтому картина с внешними ссылками непрозрачная.
Но если исходить только из вашего вопроса в первом сообщении темы (список всех внешних ссылок сайта с анкорами и страницами, на которых эти ссылки стоят) то пользуйтесь Xenu.
hcir, большое спасибо.
Получилась картина маслом: Xenа показала некоторые страницы от 100 до 1066 Out Links. При открытии этих страниц браузером пользователя и просмотра html кода - ссылок внешних нет.
Что это может означать?
Неправильная настройка, и учет внутренних ссылок, урлов картинок ищу теперь рекомендации/хелп по работе с Xenu
А Ёксель-то зачем?😮
чтобы не заморачиваться с сортировками, копированием, переносом.
для дальнейшего анализа и сохранения результатов.
+ пункт
селать для web, чтобы народ мог пользоваться
Вы готовы заплатить за подобный скрипт мне в личку - я передам одному программисту, он напишет, если его устроит цена.
спасибо,
было бы правильно, если бы он сам назначил цену
а я бы согласился/нет
Народ, какие есть соображения насчет функциональности данного српита?
мое первичное видение:
Дополняйте