а ну тогда круто, если ежедневное обновление
с форумов что ли? ну это не то, неизвестно насколько они актуальны и т.д.. я имею ввиду актуальные списки откуда-нибудь можно собрать?
Да, открыл, норм, все есть. А откуда он? И где брать актуальный список всех доменов, только у регистраторов заказывать?
честно говоря не увидел, чтобы бесплатно, вроде как доп услуга. и где, например, эта куча сервисов?
Файл RU_Domains_ru-tld.ru.gz почему-то не открывается. А откуда берется список? База доменов же по-любому постоянно обновляется. Ок, тогда следует логичный вопрос, где взять актуальный список доменов?---------- Добавлено 09.03.2016 в 13:44 ----------А все, вопрос снят. У регистраторов есть такая официальная услуга.
В том-то и прикол. А где взять эти site1.ru и siteN.ru ? Просканировав один, не получите ссылки на все остальные, потому что они редко будут пересекаться. Надо просканировать все, чтобы увидеть ссылки. А чтобы просканировать все, нужно знать все сайты, которые существуют в интернете.
еще скажите, что не так. думаете браузеры не собирают статистику и не сливают ее потом поисковым системам? откуда, например, они узнают тогда о новых сайтах?
Не совсем ясно как собирать семантическое ядро. Например запрос "туфли мужские". Если на мой взгляд найдено порядка 30 схожих запросов для одной страницы. Что мне все 30 запросов писать на одной странице, разве не сочтет это поисковик за переспам?