Ох уж этот Гугль. Вечно что-нибудь выдумает не по протоколу :)
А нету ссылки где об этом почитать?
Директива Allow недопустима в robots.txt
Нужно в Disallow: перечислять все что закрыто.
Была недавно очень похожая ситуация. Необновлялась морда. Долго. Робот ее регулярно забирал, но обновлять не хотел. Много всего попробывали. Вылечили через удаление, причем без выпадания страницы. Закрыли морду к индексации в роботс.тхт, удалили через форму и снова открыли в роботсе. При очередном апдейте страница обновилась.
Просмотрел большое количество аналитичесого материала на эту тему. Взаимосвязь уловить не получается :(
Может быть поделитесь информацией, как более опытный "товарищь по цеху" ?
pups, расскажите пожалуйста, как тИЦ влияет на процесс индексации сайта?
Чем выше тИЦ, тем чаще приходит робот? или тем больше страниц он забирает? или и то и другое?
тИЦ - тематический индекс цитирования.
По нему ранжируются сайты в каталоге Яндекса.
Если в пятницу не очень рано - присоединюсь.
Въетнамка - нормально. Не такая уж она и маленькая и ничуть не хуже Старого мельника. Прошлый раз посидели весьма душевно. С удовольствием присоединюсь и в этот раз 🍻
2Miha Kuzmin
Воттка там есть. Даже со змеями в бутылках ;)
Резюме пожалуйста киньте в личку или на мыло.
В соседней ветке наблюдают ;threadid=15738