Bra1ner1ck, дропы регнутые в конце декабря у меня начали давать траф в начале февраля, новорегам потребовалось времени чуть поменьше.
p.s я юзал постепенное наполнение ключами.
Если вдруг кому-либо понадобятся vk_token
iroomer, какую страницу вы решили проверить на тег og:video:url ?
OmgRes, этот функционал не работает, как и множество других описанных в документации параметров.
Смысла в этом почти нет, так как бот ходит почти по всем страницам, и они так же будут записываться.
saimonyz, если gen_sitemap отрабатывает нормально, то и с cleaner все будет ок, я обычно крон ставлю через wget:
saimonyz, база данных должна быть тоже в кодировке UTF-8
kxk, я уже отвечал по этому поводу, изначально он делался на sqlite, но были проблемы с использованием оперативки, поэтому был переписан на mysql
Все что не нужно, закрывается без помощи robots.txt, meta тегами и 404 ошибками.
Как пример это макрос %NOINDEX% для страницы поиска, если на ней не найдено ничего то на его месте подставится
irisat, интересная идея, пока что для вывода популярных не только с ютуба но и с сайта, есть тег %BEST%