- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Так то оно так, но все же указом всем роботам должен быть - robots.txt, в свое время по этому поводу здесь была жарка дисскусия между оптимизаторами и представителями Яндекса, вроде в итоге каждый так и остался при своем мнении :)
andrew13, Вы зовете заглянуть на некий адрес при помощи формы addurl скорее всего побывает.
Удачи.
Думаете адд урл обрабатывает машинисткаЮ, которая все урлы руками просматривает и потом добавляет опять же руками в базу ... что-то я сомневаюсь - по крайней мере сам Яндекс пишет, что его база собрана роботами.
Мое мнение, и по моему не только мое, что ЛЮБОЙ робот должен соблюдать rbotos.txt, а там стоит User Agent *
Иначе вы самый обыкновенный спамер, с кем в сети принято бороться.
Законы, обычно, трактуются однозначно ... или убивать все таки можно, если я не ножом а голыми руками ?
andrew13,
Законы, обычно, трактуются однозначно ... или убивать все таки можно, если я не ножом а голыми руками ?
Я не понял, это наезд?
Вы что именно хотели сказать то?
CarDriver,
Да, помню тот топик. По сей день ситуация такой и осталась.
andrew13,
в догонку,
не стоит домысливать то, что я не говорил. Адрес для вопросов по теме: addurl@yandex.ru либо здесь: Яndex: Раздел помощи. Советы вебмастеру.
И спокойнее реагируйте на ответы если Вы хотели бы их вообще видеть.
Удачи.
Вы что именно хотели сказать то?
😂
По-моему никакого наезда и не было.
Надо всем, кто еще этим летом в отпуске не был - отдохнуть обязательно.
Interitus, Я думаю в любом случае стоит аккуратнее с ярлыками.
А про отпуск это верно, пора. Я в сентябре собираюсь, на пару недель
Иначе вы самый обыкновенный спамер, с кем в сети принято бороться.
funnybunny, Вам определенно пора в отпуск :) Под спамером тут явно понимались не Вы, а тот робот, что не соблюдает robots.txt :)
А вообще, та дискуссия закончилась тем, что яндексоиды объявили некоторых своих роботов "не роботами" и заявили, что поэтому robots.txt им не указ.
P.S. "И не рыбы вместо рыб будут плавать там..." (С) "Танцы минус" :D
wolf, АААААААААААА понятно теперь.
Хватит гнать меня в отпуск, и дома и на работе и здесь вдобавок, осенью поеду ;)
Извините если что не так :)
Кстати, funnybunny, Вы уверены, что страницы, которые Вы постите в базу Яндекса вручную, туда попадают? Согласен, что addurl'овский робот "D" не смотрит в robots.txt, но ведь, вроде, его дело - просто проверить URL и включить его в список для обхода индексирующим роботом I, который, по идее, и заносит документы в базу и robots.txt все же соблюдает.