- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Пока делал сайт в robots.txt Добавил Disallow: / . И вот пришло время добавлять сайт в поиск гугл. Я убираю эту строчку и добавляю на индексацию. Но видимо, что доступ к сайту всё равно запрещен, т.к. когда добавил карту сайта мне выдало 103 предупреждения, а описание таково: Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.
Робот проверил и все такое - там все чисто. Скорее всего это из-за того самого Disallow: / . Но я же его убрал?? Попадут ли ссылки в индекс с этими предупреждениями и когда гугл проверит изменения в моем роботе и примет его:mad:
сам робот выглядит теперь по стандарту:
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Ппц. Неужели только у меня такое было
Нужно просто подождать пока google переиндексирует robots
Нужно просто подождать пока google переиндексирует robots
а ждать до того момента пока его робот на мой сайт зайдет??
а ждать до того момента пока его робот на мой сайт зайдет??
и ещё посмотреть внутрь sitemap, вполне может быть какие-нибудь из урлов подходят под запрещённые маски в robots...
а ждать до того момента пока его робот на мой сайт зайдет??
Ждать до тех пор пока робот зайдет на ваш сайт и решит что он достоин индексации. Чтобы поторопить робота можно прикормить его несколькими ссылками на сайт.