- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Собственно интерес заключается в следующем:
вот если меняться с серьезным , например, корпоротивным сайтом ссылками, как проверить или уберечь себя от того, что это каталог не будет индексироваться и просматриваться роботами, т.е. например в robots.txt не будет прописано не разрешать индексировать этот каталог?
Собственно интерес заключается в следующем:
вот если меняться с серьезным , например, корпоротивным сайтом ссылками, как проверить или уберечь себя от того, что это каталог не будет индексироваться и просматриваться роботами, т.е. например в robots.txt не будет прописано не разрешать индексировать этот каталог?
Посредством переговоров с веб-мастером данного сайта
Ну, например, я могу сказать, что каталог очень хорошо индексируется, а у самого на самом деле в роботс.тхт прописан Disallow на этот каталог. Что делать? Как быть?
Ну, например, я могу сказать, что каталог очень хорошо индексируется, а у самого на самом деле в роботс.тхт прописан Disallow на этот каталог. Что делать? Как быть?
Не меняться с такими. Что тут еще сделаешь.
к кому я привык,
и с кем не надо нагружать язык...
Ну, например, я могу сказать, что каталог очень хорошо индексируется, а у самого на самом деле в роботс.тхт прописан Disallow на этот каталог. Что делать? Как быть?
Ну, прежде, чем меняться, посмотрите, что закрыто от индексации... Есть даже специальная примочка для файрфокса - выделяет все ссылки, которые запрещены к индексации. Просто роботс.тхт посмотрите, тэги... Но всем же ж этим люди занимаются - соответственно, нужно обсуждать условия
Можно ли посмотреть этот роботс.тхт? Точнее возможность есть - просто его набираешь в строке браузера site.ru/robost.txt.
Формулирую вопрос четче:
Он всегда должен находиться в корне сайта? Можно его как-то спрятать от глаз людских?
Он всегда должен находиться в корне сайта? Можно его как-то спрятать от глаз людских?
Да.
Спрятать никак нельзя.
Kost, можно. Сделав через mod_rewrite обратотку на php, и выдавать только для определенных user-agent, или для определенного диапазона ip, или ещё как.
А простым обывателям выдавать какой-нить левый robots.txt, в котором все разрешено.
Doppler, http://www.be1.ru/stat/
заходим сюда и смотрим - ближе к низу, там есть содержание файла роботс