- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Работаю с сайтом под управлением vbulletin 3.8.4. Время от времени, просматривая раздел "кто на форуме" сайта, вижу, что Поисковый робот Google просматривает профиль какого-нибудь пользователя. Дело в том, что страница /member.php закрыта для поисковых роботов с помощью файла robots.txt
Фрагмент файла
User-agent: *
Disallow: /calendar.php
Disallow: /search.php
Disallow: /member.php
...
Также страница искючена из sitemap.xml. Но робот все равно ее находит и пытается индексировать. Подскажите, почему так происходит, и как все-таки запретить ему индексацию этой страницы?
Боты "всё" индексируют, но не все попадает в поисковую базу и выдачу.
Если в выдаче профилей нет, то нет смысла тратить время на данный вопрос.
Также страница искючена из sitemap.xml. Но робот все равно ее находит и пытается индексировать. Подскажите, почему так происходит, и как все-таки запретить ему индексацию этой страницы?
Наш горячо любимый гугль - зараза еще та.
И лазит абсолютно везде, в том числе там, где его не просят.
Тот же гугль хромиум непонятно за каким фигом при установке на машину отправляет на свой сервак всю платежную информацию пользователя.
Так что, удивляться особенно нечему.🚬
за каким фигом при установке на машину отправляет на свой сервак всю платежную информацию пользователя
О! Где можно почитать? Я помню от Скайпа отказался года три назад из-за подозрительной активности под Linux-ом. А тут еще этот перец. Мало того, что Тулбар как-то использует (у людей тестовые страницы в SERP-е оказываются), так еще и деньги чужие считает.
Большой Брат, мазафака! Скоро в холодильник продукты будет подкидывать в соответсвии с привычками пользователя.
О! Где можно почитать?
Скажу больше помимо Гугла такой херней занялся и Яндекс
Ну, вот еще, плюс читать комменты
Всем большое спасибо,значит подзабьем,т.к. в выдаче профилей вроде нет!