- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Зачем быть уникальным в мире, где все можно скопировать
Почему так важна уникальность текста и как она влияет на SEO
Ingate Organic
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Весь сайт выпал из Яндекса еще в апреле. Санкций никаких нет.
А сегодня из Яндекса написали, что "Проблема сайта связана с тем, что robots.txt размещенный на сайте, имеет размеры много больше допустимого. Максимально допустимый размер файла - 32 KB, в данный момент он 194,57 KB. Если эта проблема будет устранена, в течение двух недель сайт должен начать индексироваться."
Но файл robots.txt не то что большой, его просто нет!
Что можно предпринять?
Создать его и разместить.
описание стандарта исключений для файла robots.txt
Посмотрите что выдает сервер при запросе robots.txt. Похоже у вас выдается главная страница сайта.
Решение проблемы - убрать редирект или, как уже было сказано, разместить пустой robots.txt в корне сайта.
Создать его и разместить.
описание стандарта исключений для файла robots.txt
Сейчас так и сделали. Но вопрос в том, почему Яндекс показывает что он есть, да еще и такого размера?
Сейчас так и сделали. Но вопрос в том, почему Яндекс показывает что он есть, да еще и такого размера?
А где смотрите, здесь?
А где смотрите, здесь?
Нет, смотрели в корне сайта. Но там его нет и в других местах его тоже нет.
Посмотрите что выдает сервер при запросе robots.txt.
А как просмотреть, что выдает сервер?
для проверки вводите http://www.ваш-сайт.ru/robots.txt и смотрите что отдает сервер.
иногда сервер отдает по такому запросу или главную или 404 страницу, если самого файла (robots.txt) нет на сайте.
или как тут уже писали выше проверьте тут
Ну например, написать в адресной строке вашего браузера www._ваш_домен_.ru/robots.txt
Да так тоже смотрел, выдавал главную страницу.
Сейчас уже выдает содержимое роботса
Значит проблема решена.
Вам бы еще размер главной страницы уменьшить. 195 КВ для html файла многовато будет.
Попробуйте вот это
http://www.websiteoptimization.com/services/analyze/index.html
для /
Размер html файла 12 КВ
Полный размер страницы 130 КВ
Типичное время загрузки страницы для соединения со скоростью 56K - 37 секунд