каково должно быть количество этого контента (в символах или словах)?
сильно сумлеваюсь
для этого нужно имитировать браузер, как минимум (просто распарсить DOM мало)
а на это надо потратить невменяемое количество вычислительной мощИ
вследствие чего встаёт вопрос - а нафига?
они "не в подвале" визуально или в коде страницы?
потому что тут противоречие как-бы возникает - часто то, что визуально в боковушке висит высоко, в коде находится в самом низу, и наоборот
и тут уж нужно выбирать что-то одно: либо ссылку видно в браузере в первом экране человеку, либо для робота она располагается выше, но человек её уже вряд-ли заметит
я изменил положение ссылок на некоторых сайтах, и они визуально в подвале оказались, зато роботу должно быть приятно теперь... :)
cmse.ru
....
101domain.ru
это вы можете установить опытным путем
ну а что с ними можно ещё делать?
вариантов тут не богато - либо оставить, либо грохнуть, чтоб глаза не мозолили
104к страниц вы не запихнёте в Сапу, 75К - теоретический максимум
500 ссылок с главной + 150 со страниц 2-ув - карту, конечно, надо мастерить для этих исхищрений
и сильно сумлеваюсь, что вам удастся продать хотя бы 10К ссылок с сайта (за весь срок жизни сайта, а не за месяц даже) - да и то, если цену в 25 коп. поставить (хотя... чего на свете только не бывает...)
конечно, не нормально, ап чём речь...
ф топку их, всех скопом!
вполне может быть комп такого же взломанного, как и вы
из компа просто прокся делается, и через неё уже ведётся подрывная работа
владелец компа, если не шибко внимательный, может и не знать об этом
нет, не видел
но пострадавший говорит - "Достойный сайт"
что, есть основания ему не верить?