- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Подскажите, как можно убрать страницу robots.txt из результатов выдачи
При запросе site:mysite.ru выдается в поиске mysite.ru/robots.txt
Какого черта - это еще один вопрос, на который я хотел бы узнать ответ))
Вспомнил, что есть инструмент удаления урлов в панели вебмастера. А второй вопрос открыт.
нынче все как то так 😂 - https://www.google.ru/search?q=robots.txt
🤪
Disallow: /robots.txt
нынче все как то так 😂 - https://www.google.ru/search?q=robots.txt
лучше так https://www.google.ru/search?q=inurl:robots.txt
можно еще и так))
https://www.google.ru/search?as_q=robots&as_epq=&as_oq=&as_eq=&as_nlo=&as_nhi=&lr=&cr=&as_qdr=all&as_sitesearch=&as_occt=any&safe=images&as_filetype=doc&as_rights=#as_qdr=all&fp=cb179a9282c7229d&lr=&newwindow=1&q=robots.txt+filetype:txt&start=0
а что не так?) гугл индексирует текстовые файлы, robots.txt не запрещен в robots.txt
Он всегда их индексировал.
А чем он мешает? В выдаче в топе?
используйте Disallow, затем через гугл вебмастер просмотрите страницу и отправьте в индекс.
В выдаче в топе?
😂
ТС, или вместо посадочной выше?)
... удаляйте его к чертям :)
А чем он мешает? В выдаче в топе?
слава богу - нет :)
проблема с отчитыванием перед начальством
---------- Добавлено 28.08.2013 в 12:10 ----------
Он всегда их индексировал.
я ни разу не замечал. может плохо смотрел.
проверил свой молодой сайт, которому месяц - там файла robots.txt по директиве site:mysite.ru не выдается:) так что может и не всегда
хуже когда гугл вставляет быструю ссылку на этот файл, но это тоже поправимо - можно убрать в wmt