Комментарии - tkulbaco - Профиль вебмастера - Форум об интернет-маркетинге

27 мая 2014, 15:23

big boy, спасибо за ответ. А можно по-подробней, что в метатегах может быть не так? Куда обратить внимание?

26 мая 2014, 22:03

Ребята, помогите, пожалуйста. Что-то не получается настроить роботс. ВМТ и ЯВМ упорно твердят, что сайт закрыт от индексации.

Роботс вот такой:

#

# robots.txt

#

# This file is to prevent the crawling and indexing of certain parts

# of your site by web crawlers and spiders run by sites like Yahoo!

# and Google. By telling these "robots" where not to go on your site,

# you save bandwidth and server resources.

#

# This file will be ignored unless it is at the root of your host:

# Used:    http://example.com/robots.txt

# Ignored: http://example.com/site/robots.txt

#

# For more information about the robots.txt standard, see:

# http://www.robotstxt.org/wc/robots.html

#

# For syntax checking, see:

# http://www.sxw.org.uk/computing/robots/check.html



User-agent: *

Crawl-delay: 10

# Directories

Disallow: /includes

Disallow: /misc

Disallow: /modules

Disallow: /profiles

Disallow: /scripts

Disallow: /themes

# Files

Disallow: /CHANGELOG.txt

Disallow: /cron.php

Disallow: /INSTALL.mysql.txt

Disallow: /INSTALL.pgsql.txt

Disallow: /INSTALL.sqlite.txt

Disallow: /install.php

Disallow: /INSTALL.txt

Disallow: /LICENSE.txt

Disallow: /MAINTAINERS.txt

Disallow: /update.php

Disallow: /UPGRADE.txt

Disallow: /xmlrpc.php

# Paths (clean URLs)

Disallow: /admin

Disallow: /comment/reply

Disallow: /filter/tips

Disallow: /node/add

Disallow: /search

Disallow: /user/register

Disallow: /user/password

Disallow: /user/login

Disallow: /user/logout

# Paths (no clean URLs)

Disallow: /?q=admin

Disallow: /?q=comment/reply

Disallow: /?q=filter/tips

Disallow: /?q=node/add

Disallow: /?q=search

Disallow: /?q=user/password

Disallow: /?q=user/register

Disallow: /?q=user/login

Disallow: /?q=user/logout



host: dalnoboyka.ru

Sitemap: http://dalnoboyka.ru/sitemap.xml