- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
При попытке добавить через аддурилку получаю результат:
Подробнее о запрете на индексацию вы можете прочитать в FAQ.
Смотрю лог Апача:
(скип)"Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)" "GET /robots.txt HTTP/1.1" 200
Хм...
А что с аддурилкой случилось?
Всё в порядке.
Хм...
А в роботс заглядывали?
Когда запрещено в роботс, оно обычно так и пишет. А это АГС или бан.
Когда запрет в роботс то он пишет
Указанный URL запрещен к индексации в файле robots.txt на сайте ...
А вот что там делает "Mozilla/5.0"?
Когда запрет в роботс то он пишет
Указанный URL запрещен к индексации в файле robots.txt на сайте ...
А вот что там делает "Mozilla/5.0"?
возможно что боты яндекса используют линуховый хтмл двиг gecko для работы с хтмл. а он вроде мозилой представляется.
Вообще-то ещё есть метатег роботс, запрет может там быть. Типа: <meta name="robots" content="noindex, nofollow" /> Насчёт агс и бана, ТС не привёл пример сайта, поэтому вероятно знает, что сайт в порядке.
Роботс.тхт - пустой.
Домен 3-го уровня, только созданный.
Удалял роботс - результ тот же.
di_max добавил 18.09.2010 в 03:28
возможно что боты яндекса используют линуховый хтмл двиг gecko для работы с хтмл. а он вроде мозилой представляется.
User-Agent - я любой нарисую...;)
Насчёт агс и бана, ТС не привёл пример сайта, поэтому вероятно знает, что сайт в порядке.
ЗНАТЬ, что сайт в порядке, может только Платон;)
ЗНАТЬ, что сайт в порядке, может только Платон;)
- Што, нынче на еще не рожденные сайты уже санкции и фильтрами лОжат?;)
- Што, нынче на еще не рожденные сайты уже санкции и фильтрами лОжат?
А ты погугли домен;) Может оказаться бэушным.
А ты погугли домен;) Может оказаться бэушным.
Домен 2-го уровня - мой с 2003 года и естественно он бэ-уш-ный.
А говорю о новом субдомене 3-го уровня.
Существующие субдомены - без вопросов.
А вот с новым - засада.
Кста, с гуглей - без вопросов.