htexture

htexture
Рейтинг
228
Регистрация
29.05.2017

А в чатжпт пробывали? )

Такое поведение может быть связано с настройками Nginx, которые определяют поведение по умолчанию для поддоменов. Скорее всего, на сервере настроен конфигурационный файл, который перехватывает запросы к robots.txt и возвращает стандартный (запрещающий) файл.

Шаги для диагностики и исправления проблемы

1. Проверьте конфигурацию Nginx

Откройте основной конфигурационный файл Nginx, который может находиться в одном из следующих мест:

  • /etc/nginx/nginx.conf
  • /etc/nginx/sies-enabled/default
  • /etc/nginx/conf.d/fastpanel.conf (или другой файл FastPanel)

Ищите директиву, которая управляет обработкой запроса к robots.txt . Например:

Например:

location = /robots.txt { default_type text/plain; return 200 "User-agent: *\nDisallow: /\n"; }

Если такой блок найден, он заменяет любые robots.txt из корневой папки сайта. Удалите или измените этот блок, если он существует.

Если у вас используется wildcard для поддоменов (например, server_name *.site.ru; ), посмотрите настройки, связанные с поддоменами. Для поддоменов может быть прописана обработка robots.txt в конфигурации:

server {
    server_name *.site.ru;

    location = /robots.txt {
        default_type text/plain;
        return 200 "User-agent: *\nDisallow: /\n";
    }

    root /path/to/default/site;
}

В этом случае отредактируйте этот блок или удалите его.

3. Исключите глобальные настройки Nginx

Иногда robots.txt может возвращаться благодаря глобальным настройкам Nginx (например, через include-файлы). Проверьте их:

grep -R "robots.txt" /etc/nginx/

Это поможет найти любые упоминания robots.txt в конфигурации.

4. Проверьте FastPanel

FastPanel иногда создает свои шаблоны конфигураций. Убедитесь, что для конкретного домена или поддоменов не используются специальные правила. Для этого проверьте файлы конфигурации, которые FastPanel мог создать, например, в /etc/nginx/fastpanel/ .

5. Измените правила в Nginx

Чтобы исправить проблему, вы можете добавить такие настройки:

  • Для основного домена:

location = /robots.txt {
    root /path/to/main/site;
}

Для поддоменов:

server {
    server_name *.site.ru;

    location = /robots.txt {
        root /path/to/main/site; # или конкретный путь
    }
}

6. Перезапустите Nginx

После внесения изменений перезапустите Nginx:

sudo systemctl reload nginx

7. Проверка

Убедитесь, что изменения применились:

curl -I http://sub.site.ru/robots.txt
nash300 #:

сказки, 6 лет на андроиде samsung от s7 до s22 ни один не глючил, если купить за 3000, то да глюки будут, но это не в андроиде дело, а в цене

Тоже сижу начиная с s3, сейчас s21, до сих пор нету даже намека на необходимость замены.

Горечь использования айфонов словил на iphone 3gs, меня тогда бомбило знатно от тех ограничений, которых не было на андроиде. Желание купить айфон до сих пор нету

eavy #:

Причем тут ваши личные сайты и трафик для них?

Рекламодатели уходят в социальные сети, в таргет рекламу, к инфлюенсерам, делают нативку, прямые интеграции.

Контекстная реклама давно уже устарела и многократно проигрывает. От этого заработок на статейниках (никому не нужных) с РСЯ падает и будет падать.

Adsense c вами не согласится) Они ввели какой-то новый формат, помимо этого +30% к доходу за сегодня, вчера)

У меня есть сайт, на нем старые форматы, пнж, джпег, хочу тоже все по новой слить, переконвертировать в вебп, сделать тумбы, а не пихать 1200пиксельные в окно шириной 650пикселей.

Вопросы:

1) как отнесется поисковик что пропали джпеги на которые ставят у себя прямые ссылки с отображением на чужих сайтах, понизит ли это выдачу если они станут недоступны как для поисковика и для любителей выставлять ссылки на фото на чужих сайтах?

2) вебп считается лучшим форматом для поисковика? или ему нету разницы?

3) какой ширины тумбы считаются нормальными на данный момент?

4) какая ширина картинок считается большим у гугла и в почете?

damn-doubleclick #:

Hetzner и их партнёры которые реагируют на любой ложный DMCA, и даёт 3 дня на выселение? 😂 

Не у всех серая тематика, это уже Ваши проблемы, за спокойствие прийдется доплатить, а не лоукосты брать и потом обвинять их в том, что занимаетесь подобными проектами.

Mnlaw #:

Я одно не понрмаю. Если такая ситуация в мире, то зачем хоститься там где то?  Кроме цен что там лучше? По моему чисто из принципа, какого то прозападного.

Я даже не знаю что на это ответить, я всегда думал, что цена влияет на выбор, а финально то, что у хецнера и овх все автоматизировано настолько, что ты после аукциона добавляешь сервер в корзину, а через минуту уже имеешь доступ к ссш и поднимаешь сервер за считанные минуты с фастпанелю, а не ждешь сутки где каждая минута может быть важна для аптайма.

Много сайтов, лень этим заниматься, сильно не потеряем если к нам не будут заходить из рф, все равно рекламу им не откручиваю, кому надо заходят через впн и по графикам очень заметно что доля поднялась зарубежных посетителей, доход повысился после дня начало блокировок от ркн. С одной стороны хорошо, с другой стороны плохо, получается среднее все тоже самое. Еще жирный плюс, перестали ломится боты окончательно из рф) спасибо ркн)
Dmitriy7 #:
Ну так а что тут такого? Люди просто не хотят портить сами себе жизнь и сами себя подставлять под дополнительную нервотрёпку местной налоговой и властей. Я тоже спрашивал своих знакомых в США не позволят ли они мне на них адсенс зарегать, а потом чтоб они скидывали мне деньги свифт-переводом через местный банк в Москоммерц банк в РФ. Так они от этого предложения отмахивались, как вампир, когда видит осиновый кол. Да и я тоже, если бы жил в цивилизованной стране, фиг бы кому позволил на себя что-то там зарегистрировать из России, и тем самым получить жутчайший геморрой от местных властей, или ещё под какие-нибудь очередные санкции попасть на пустом месте.

Будь у меня родственник, которому нужна была бы помощь, зарегал бы и нашел бы способ передать деньги, хоть золотым слитком по почте. Тут уже вопрос насколько они родственники, одно дело когда Вы созваниваетесь чуть ли не каждую неделю и бухаете онлайн, а другое когда тебе впервые за 10 лет позвонили сразу с порога с просьбой зарегать на себя компанию, но деньги мне.

gachaev #:

сейчас у них на форуме адсенса вычитал что нужно делать скан 1-2 страницы паспорта + прописка + инн

это все объеденять в пдф и отправлять им

https://support.google.com/adsense/thread/260797905?hl=ru&authuser=2


сейчас так сделал, посмотрим что выдаст

Тоже так думал сделать, но пока прохожу проверку по измененым данным внутри гугла и новой формы, возможно опять запросят и сделаю все также как Вы написали. Нет, чтобы это написать, потому-что я обычно так заливал на другие сервисы, 1,2+прописка, но тут ступор входишь, когда тебе разрешено залить только один файл... но гуглу же сложно написать более подробно инструкцию какие файлы заливать.

Вообщем, заменил на корректные имя фамилию как в загран паспорте, сразу выбило ошибку по форме в8-б, заново ее заполнил, отправил, теперь все на проверке. Надеюсь пройдет без приключений.
Всего: 2721