Я вот полазил по логу. Получилось примерно 300 запросов подряд сделал Яндекс (300 разных файлов прочел). И сделал это за полчаса. Нагрузка на Хостинг (исчисляется за час с 8 до 9 утра, а поиск был с 8 до 8:30 утра) - 7 процентов!
Хостинг www.1gb.ru
Ну как я его починю?
Скрипт стандарный, вполне рабочий (разработчик проверил). Когда ссылок было немного, проблемы отсутствовали. А сейчас ссылок больше тысячи и для их индексации нужны ресурсы.
Что тут чинить?
Как оказалось, нагрузку на процессор создает... Яндекс! Ведь это он: "Yandex/1.01.001 (compatible; Win16; I)" ?
А в другое время - Гугль! +http://www.google.com/bot.html)"
Нет ли способов "разрядить" обстановку? То есть не запрещать индексацию полностью, но ограничить время посещения или интенсивность поисковой работы?
Ведь не должен же Яндекс создавать такую ситуацию!
Может быть и так. Сам я скрипты писать не умею, так что не мне судить. Но скрипт linkexchanger используется тысячами (списки содержат несколько тысяч пользователей) пользователей. При этом, как я уже говорил, база данных не используется.
Собственно, я чего хочу? Просто заблокировать сайт от всех, кроме тех, кто хочет проверить обратную ссылку. Возможно это?
Это Вы совершенно напрасно... Такая проблема существует, и не только у меня.
У меня есть еще маленький каталог на этом же скрипте, так он давно забит так, что административная часть каталога не работает.
С разработчиков переговорил. Да, скрипт поврежден автоматизированными рассылками. Разработчик исправил без возражений.
База в скрипте не используется.
Хостер дал лог файл - чего там искать? Я в нем что-то вообще ничего не пойму - какая-то длиннющая таблица...
Можно ли просто заблокировать сайт от всех, кроме тех, кто хочет проверить обратную ссылку?
Мое скромное мнение таково:
1. за внешние ссылки не банят. Как я полагаю, для исключения некоторых способов недобросовестной конкуренции.
2. некоторые ссылки Яндекс видит, но при расчете тИЦ не учитывает. Возможно, что есть и такие варианты, когда учет ведется с понижающим коэффициентом.
3. за установление линкопомоек на практике бан возможен. Как и за применение каких-нибудь других хитростей. И происхожит это, как мне кажется, исключительно по жалобам Яндексу.
Сущность бана - указание на обстоятельства, которые хозяин сайта ИМЕЕТ ВОЗМОЖНОСТЬ исправить, то есть которые находятся в пределах его сайта.
Как я уже сказал, Яндекс видит ссылки с этих форумов - то есть они не закрыты для индексации.
На самом деле я запостил намного больше форумов Несколько тысяч), но Яндекс прооиндексировал их не все. Тысяча - это приблизительное число ссылок, которые Яндексом учтены. Другое дело, что они учтены с коэффициентом ноль.
Поделюсь и я результатами своего эксперимента.
Три месяца назад я зарегистрировал специально созданную страничку в 1000 форумов. Зарегистрировал - это значит зарегистировал пользователя, указав свой сайт, но не делая сообщений в самом форуме.
Результат: Тиц=0. Хотя Яндекс указывает Формы в перечне ссылок на сайт.
Вот этого я не понял. Разве Яндекс разделяет страницы на более значимые и менее значимые (с позиции тИЦ)?
Можно ли сказать, что если у главной страницы тИЦ=2000, то у страницы каталога этого сайта тИЦ=200 (или эквивалентен 200)?
