wolf: Ух, ты, какая красота. :) А в запрещенных папках - что, только по одному корневому урлу? Кстати, директива Allow: / - бессмысленна в Вашем случае.
да, в запрещенных папках только индекс с которого идут ссылки на предыдущую директорию (обычный адалтовский фрих)
в админке Diagnostics-Content analysis написало траблу - дублирование тайтлов и вроде контента. после того как закрыл - где-то через недельку обработало и сняло клаймы. домен свежый еще.
п.с. ну красота, не красота, а занимаюсь только белым адалтом - только адверт и фсе ))
blackpioneer добавил 07.05.2008 в 15:12
сегодня непонятно почему стало 28 урлов
Home page crawl: Googlebot last successfully accessed your home page on May 3, 2008.
Index status: Pages from your site are included in Google's index. See Index stats.
Pages in your Sitemap(s) are included in Google's index. See Sitemaps overview.
да не, тут вопрос больше по сео а не по адалту
Ух, ты, какая красота. :) А в запрещенных папках - что, только по одному корневому урлу? Кстати, директива Allow: / - бессмысленна в Вашем случае.
да, в запрещенных папках только индекс с которого идут ссылки на предыдущую директорию (обычный адалтовский фрих)
в админке Diagnostics-Content analysis написало траблу - дублирование тайтлов и вроде контента. после того как закрыл - где-то через недельку обработало и сняло клаймы. домен свежый еще.
п.с. ну красота, не красота, а занимаюсь только белым адалтом - только адверт и фсе ))
blackpioneer добавил 07.05.2008 в 15:12
сегодня непонятно почему стало 28 урлов
Home page crawl: Googlebot last successfully accessed your home page on May 3, 2008.
Index status: Pages from your site are included in Google's index. See Index stats.
Pages in your Sitemap(s) are included in Google's index. See Sitemaps overview.
URLs restricted by robots.txt 28 Details »
Надо смотреть роботс. Одна запись может запретить кучу урлов.
Ну вроде все ок. Чтобы перестраховаться - выложу здесь:
User-Agent: *
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/babe/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/babes/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/horny/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/hot/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/pussies/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/pussy/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/sex/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/wet/
Disallow: /young-hentai-porn-movies/4-sexy-hentai-girls/xxx/
Allow: /
а то что заблокировано - вообще не вписывается ни в какую логику - как уже писал, список который оно видит генерировался очерь произвольно.