Skop

И чем он кроме автоматизации отличается?:)

Я где-то сказал, что их оставлять нужно? Тема по моему называется как загнать. Загонится? - Загонится, ну и верните всё на место. Прям как дети малые, ну всё разжевать нужно, да ещё и в рот положить

ерофеич

Если Dagon Design Sitemap Generator стоит, можно просто в настройках поставить "Количество единиц контента на странице" около 100, "Метод навигации Карты Сайта" "Страница: 1 2 3 4 5" для наглядности, и повторить то что pistolero посоветовал с 5го пункта с полученными ссылочками

Сапе на это всё-равно, проблемы будут с яндексом. А могут и не быть, сколько таких сайтов нормально живёт, яндекс он и в африке яндекс, рэндом никто не отменял

При таком кол-ве страниц это прямой путь в сомнительную базу при проверке модератором

1. Создать карту сайта

2. Разбить её на n/100 карт поменьше по 100 ссылок (n - кол-во страниц). Саповский робот есть по 150, на 50 меньше для подстарховки

3. Залить на сайт, на главную пихнуть ссылку на них куда-нить в футер, например "Карта сайта:1,2...n"

4. Заказать переиндексацию в сапе когда можно будет (если память не изменяет - можно через месяц после последнего обхода)

У меня 5 раз главная, и 4 раза одна внутренняя😂

Жёстко штырит - по новому маленькому сайту выдаёт 11 страниц в индексе, из которых 5 раза главная, 4 раза одна внутренняя 😂

JustRaider

Оптимизируте форум по "СЕО текст"?😂 так ищут мало, выбрали бы поинтереснее🍿

Слышал, только какой-то он не быстрый, или до него туго доходит, новая страница висит уже неделю, а робот в течении 2х недель заходит раз по 20 на дню судя по логам сервера

🍿

Ну ладно, трафа нет, так пусть хоть робот при деле будет:D

Первый раз такое чудо вижу - сегодня с утра по одному новому сайту по кол-ву страниц в индексе пробиваются 2 версии главной страницы - старая и новая:p

Яндекс что-то там перекумарил ночью чтоли?:D

Как-то так:

User-agent: *
Disallow: /phpBB2/profile.php

Или сразу всё лишнее:

User-agent: *
Disallow: /phpBB2/extension.php
Disallow: /phpBB2/news.php
Disallow: /phpBB2/common.php
Disallow: /phpBB2/config.php
Disallow: /phpBB2/faq.php
Disallow: /phpBB2/friend.php
Disallow: /phpBB2/groupcp.php
Disallow: /phpBB2/login.php
Disallow: /phpBB2/memberlist.php
Disallow: /phpBB2/modcp.php
Disallow: /phpBB2/posting.php
Disallow: /phpBB2/privmsg.php
Disallow: /phpBB2/profile.php
Disallow: /phpBB2/search.php
Disallow: /phpBB2/viewonline.php
Disallow: /phpBB2/watched.php
Disallow: /phpBB2/index.php?c=