У вас ошибка в реализации (проектировании) вашей системы. Не должно быть ситуаций, когда в бразуер грузится страница размером в 50Мб. Опишите ситуацию на конкретном примере — что у вас за проект и откуда берётся такой огромный размер данных?
А что мешает просто скопипастить URL страницы в поиск Яндекса и посмотреть дату кеширования страницы?
Не устану повторять, что никогда, никогда в жизни не стоит делать кириллических URL. Это были мои грабли на которые я напоролся однажды в крупном проекте и вывел для себя одно: кириллические URL на практике — это зло.
Скиньте пример URL — возможно они неравильно кодируются в проценты (percent-encoding).
Хм, кстати, я вижу, что у вас уже есть sitemap — http://gradusnik.pro/index.php?option=com_xmap&view=xml&tmpl=component&id=1 , но он неполный, правда. Так, что лучше, видимо, всё-таки сгенерировать сайтмап той утилитой, что я вам дал и указать в robots.txt: Sitemap: http://gradusnik.pro/sitemap.xml (вместо того, что там сейчас) — авось, поможет. Ну, и делайте «случайные теги».
А так — видимо, какой-то очередной прикол от Яндекса с этой индексацией урлов вложенных. Никогда не думал, что пункт «используйте максимально короткие и понятные URL» в руководстве для вебмаствером имеет реальный смысл.
Тогда и вставляйте, и делайте sitemap.xml.
Сделайте указанное выше и ждите неделю-полторы. Если не помогло — делайте новый сайт с редиректом с текущих URL на новые. А сайт давнишний? — может вы еще не успели сайт до конца сделать, а уже попали под АГС из-за того, что закупали на него ссылки?
Ну, понимаете: специфика сайта такова, что тут можно нормально продвигать только главную страницу — это полноценный функционал для любого посетителя. А вот указанный мною лендинг — он тоже содержит уникальный текст (тот самый текстовый абзац сверху с картинкой) — т.е., его, например, и продвигаю. Также, продвигаю профайлы, например, конекретных музыкантов, например, как этот — http://bandhunters.org/profile/view.aspx?id=123
Но, как сказать, я не что, чтобы вообще продвигаю — сайт сам наверх лезет, я только анонсы даю в журналах соответствующей тематики — чтобы люди узнавали, заходили, регистрировались, искали. Т.е., сервис 200% для людей его и двигать особо не нужно. Просто я хочу ему, так сказать, «помочь», чтобы он быстрее вылазил — лендинги создаю, ключевики добавляю, мета-теги оптимизирую и прочее.
Ну, на меня есть ссылки — вот я и жду... жду... Хотябы ТИЦ 10 должно присвоить.
Ну, если уж на то пошло, то вы не будете ради индексации прописывать абсолютно все страницы 4-го уровня в подвал? — это временное решение проблемы, которая возникает по какой-то иной причине (кроме главной: Яндекс — мудак).
В качестве варианта решения я бы порекомендовал:
— сделать sitemap.xml (у меня есть сайт ориентированый чисто на поиск — поэтому никак иначе, чем через результаты поиска, страницы не проиндексировать. Так вот добавление sitemap.xml мне полностью помогло — всё в индексе).
— сделать модуль на сайт, что-то типа «случайные теги» — т.е., просто на каждой странице сайта в подвале действительно будут появляться случайные теги со ссылками на конкретные страницы N-го уровня. Так вам не нужно будет ничего прописывать вручную и будут ссылки в подвале.
— поменять структуру URL (но, понятно, что это очень рисковая затея).---------- Добавлено 19.11.2013 в 13:39 ----------
Возвращаясь к моему посту: я считаю, что это НЕ решение существующей проблемы. Нужно лечить проблему, а не следствия. Начните с сайтмапа, если не поможет — делайте «случайные теги».
Попробуйте создать sitemap.xml со всеми ссылками сайта и добавить его в Яндекс.Вебмастер — возможно, это поможет.
Если нет скрипта генерации sitemap.xml, воспользуйтесь онлайн-сервисом — http://www.xml-sitemaps.com/
Не нужно: вы путаете дизайн со «свистелками и перделками». У него сайт веб-прогаммиста, а не дизайнера — он должен представить потенциальному клиенту свои навыки в удобной форме. Сайт УЖЕ справляет с этой задачей неплохо, нужны только небольшие правки; а вы советуете тратить время «сделать покрасивше» — это не его работа и не его специализация.
Не знаю — как по мне, нормальный дизайн: одностранично, просто, работы видны сразу + есть отзывы — чё еще надо? Ну, понятно, что не профессиональный уровень дизайна, конечно, но я реально видел плохой дизайн у того, кто указывает, что он не только верстальщик, но еще и дизайнер. Я бы реально сам заказал, если бы мне нужна была вёрстка; а если хочется заказать — то задача сайта почти выполнена.
Из замечаний:
— темные блоки сверху я бы убрал и перечислил бы услуги и преимущества просто увеличенным белым шрифтом.
— можно ниже мелким шрифтом написать, что дизайн вы заказываете отдельно у дизайнера (а не у меня)
— «Или задайте свой вопрос прямо сейчас!» (допишите, что-то типа «отвечаю на ваше письмо в течении получаса!»).
— «Макс Летов. Верстальщик, веб-программист» смените на «Верстальщик, веб-программист — Макс Летов» — важнее знать чем вы занимаетесь, а не как вас зовут (а лучше вообще Максим Летов — но, это уже, если не бренд).---------- Добавлено 18.11.2013 в 18:48 ----------А еще я бы добавил «фишек», по типу:
— 5 причин почему мой HTML|JS|PHP|CSS код лучше чем у других верстальщиков
— примеры моего кода (ну, и примеры кода, естественно)
