Помогите в оптимизации сайта, или правим robots.txt и .htaccess

Самому интересно знать, как быть с редиректом? Кто нам поможет?

Ребята привет, помогите разобраться в расположение тегов html5 в блоке страницы, намудрил😕

Ситуация такая

<h2> название </h2>

<p> небольшое описание</p>

далее три колонки

<h4> название</h4>

по небольшому описанию

после описания

кнопка подробнее

нажимаем на кнопку

первый столбец слева

<h3>+++++</h3>

и небольшой текст

средний столбец

<p>небольшой текст</p>

третий столбец слева

<h2>++++++++</h2>

небольшой текст

Как все таки правильно будет это выглядеть для поисковиков

Перечитал кучу информации, засомневался и пришел к вам для обсуждения ioan.naoi@bk.ru

А вот поддержка яндекса говорит, что оба способа, что редирект, что через robots.txt, правильные и можно оставить оба варианта. Никаким образом эти изменения на выдачу не повлияют. Таким образом, можно смело браться за дело!

bandesign, у вас редирект со страниц со слешем ведет куда-то не туда.

Страница 404 действительно не должна отдавать никакой код кроме 404. Надо создать страницу под 404 ошибку и настроить ответ сервера. Иначе поисковики будут некорректно воспринимать несуществующие страницы.

Карту сайта иметь желательно. Однако, есть сайты прекрасно живущие без нее. Собственно, она у вас уже размещена, поддерживайте ее актуальность.

Спасибо вам огромное. С момента выхода данного топика, многое что произошло. Выявилось несколько ошибок.

Для примера, сервер отдавал код на любую несуществующую страницу и делал перенаправление на индексеый файл из-за этой директивы RewriteRule ^(.+) index.php?req=$1&%1 (вроде бы).

Пришлось в итоге немного покопаться в коде самой цмс и всё сделать правильно. Теперь есть страница 404.пхп с тветом кода 404 а не 200 как было до этого (при чем долгое время), надеюсь после этой процедуры, поисковики будут более "тепло" относиться к нашему сайту.

Верно заметили, "вшили" карту сайта и будем постоянно её обновлять, по мере нового наполнения сайта.

Остался незакрытым вопрос по поводу склейки домена "Склейка домена - Яндекс считает домен (ТИЦ) склеенным с bandesign.ru." см. https://a.pr-cy.ru/www.bandesign.ru

Так же убраны дубли с www.bandesign.ru/ со слешем на конце и с файлом индекс.пхп через редирект напрямую к www.bandesign.ru

Тут если можно подробнее, сейчас всё в порядке, или ошибка на данный момент не устранена?

Перейдите на адрес http://www.bandesign.ru/portfolio.php и допишите слеш в конце. Отдается страница 404, еще и без картинок. А должен происходить редирект на изначальную страницу.

Верно, по картинкам недочеты убраны.

А по поводу редиректа, на какую изначальную страницу он должен редиректить? Сейчас открывается 404я, разве не так и должно быть?

301 редирект должен происходить со всех страниц со слешем на соответствующие страницы без него. К примеру со страницы http://www.bandesign.ru/portfolio.php/ на страницу http://www.bandesign.ru/portfolio.php.

В принципе ничего сильно криминального не случится, если вы оставите 404 страницу. Но редирект все же лучше

Настройка переадресации на папки без слеша (убираем слеш в конце) #

RewriteCond %{REQUEST_FILENAME} !-d

RewriteCond %{REQUEST_URI} ^(.+)/$

RewriteRule ^(.+)/$ http://www.site.ru/$1 [R=301,L]

Я в роботсе для яндекса прописываю отдельно

User-agent: Yandex

301 редирект для гугла, а директива Host для яндекса при склейке.

Куча инфы по настройке редиректа в htaccess

здесь