Т.е. header("Location: /."); ?
А роботс.тхт никак не решить это?
Там довольно большой заголовок.
Ну тогда проснифайте как ЯБар забирает тИЦ сайта и будет вам счастье :) У меня так несколько каталогов делают и ничего.
310 как раз просто рай, не так сервера нагружены как у остальных. Если на Инфобоксе в среднем за день скрипт показывал по 30-50% загруженности сервера, то на 310 в среднем 5-15%.
Да и поддержка там лучше чем в ИБ, отвечают даже в 4 часа утра минут через 5-10 после отправки тикета, а в ИБ дай бог к обеду следующего дня пропишут тебе домены или на вопрос ответят.
А то что скрипт отключался не мудрено, лимит же 30 секаунд на выполение, в хтаксесе вроде можно его повысить, если не ошибаюсь.
P.s:
Нет, мой каталог так же запрашивает постоянно тИЦ, не отвлекаясь на разные другие действия. За 30 секунд берёт 950-1150 тИЦ'ов.
Вы как тИЦ забираете? Стандартным запросом каким то или тем же что ЯБар? Может в этом разница? Т.е. заголовки ЯБара отсылает и запрос аналогичный ЯБаровскому или другой какой?
Ну за десять секунд тысячи то не сграбить.
У нас каталог берёт 1К в 30 сек. примерно. И нормально прочёсывает всё.
Я не про поиск, я про запрос тИЦ.
Его как раз и запрашивать тем же методом что и ЯБар.
У меня и 3К и 5К запросов в день нормально проходило.
Лимит? А если запрашивать тем же методом как Я.Бар?
По идее же если человек с Я.Баром пройдёт больше чем по 5К сайтов в месяц, его АйПи не банят? Соответственно почему должны банить скрипт который проверяет тИЦ с таким же запросом?
Это смотря как раскрутить. На хорошем и траф разнообразных тематик собирать можно, поэксперементировать с партнёрками на каталогах интересно (если адекватную разделу каталога вывешивать).
Да и без особой раскрутки хороший каталог 800-1500 хостов в день имеет, а несколько таких каталогов уже можно сказать сеть легальных доров :)
хттп://tutorial.semonitor.ru/#4
Седьмой абзац:
Да я и не тороплюсь, хочу всё просто сделать как надо.
Вот седьмой день, трафику с поиска уже 1800 хостов в день, а Гуглец на страницах даже не валялся, обидно! 😒