думал минут 5 и ничего не загрузил, хотя диск напрягал.
Он и не загрузит если не проставить в конце COMMIT
После: unique_checks=0 foreign_key_checks=0
Это не влияет на загрузку, если нет констрейнтов(а у вас их нет)...
Короче сделал тип myISAM за 1 минуту всё загрузил. Вот это я понимаю скорость.
Конвертните только таблицу обратно в innodb, ибо myisam - прошлый век и выигрывает у innodb только для узкоспециализированных задач.
А вообще для загрузки/выгрузки пользуйтесь встроенными в mysql вещами и не будете знать что такое долгая загрузка на таких объемах данных.... ваш файл загрузится секунд за 5-10
Wiiseacre: Ошибается в чем? Там ведь можно настроить получение всех данных не из его базы, а прямо от яндекса, гугла, линкпада и остальных - тут он ошибиться не может, просто удобно выводит информацию из других сервисов.
Приведенные выше параметры рдс-бар берет напрямую с поисковиков.
ilux: Действительно полезный сервис , точно считает.
Только не понял как он получает "постоянных посетителей" ?
Выше же написано:
Благодаря сервису мы имеем реальную среднюю посещаемость в день, а с публичных данных счетчика – число уникальных посетителей в месяц. Сравнивая их, мы получим число посетителей, которые посещают сайт регулярно (к примеру, посещаемость топсапы – 1000 уников в день, уникальных посетителей в месяц же только 16к. Из этих данных получается, что 500 человек заходит на сайт регулярно
c-alex: Такой сервис не трудно сделать для яндекса.
1) в яндекс XML можно вывести одним запросом 100 URL вашего сайта, стоит 1 лимит.
1 000 URL - 10 лимитов.
10 000 URL - всего-лишь 100 лимитов.
2) если у сайта есть sitemap.xml парсим из него все URL
3) если у нас есть все URL из яндекса, и все URL из sitemap - можно выделить URL'ы которых нет в яндексе но есть в sitemap - это и будут непроиндексированные страницы.
Если найдется спонсор, могу сделать PHP скрипт.
проблема лишь в том, что Яндекс не выдает больше 1000 результатов по любому запросу...
Поставил:
autocommit=0
думал минут 5 и ничего не загрузил, хотя диск напрягал.
Он и не загрузит если не проставить в конце COMMIT
unique_checks=0
foreign_key_checks=0
Это не влияет на загрузку, если нет констрейнтов(а у вас их нет)...
Конвертните только таблицу обратно в innodb, ибо myisam - прошлый век и выигрывает у innodb только для узкоспециализированных задач.
А вообще для загрузки/выгрузки пользуйтесь встроенными в mysql вещами и не будете знать что такое долгая загрузка на таких объемах данных.... ваш файл загрузится секунд за 5-10
Писать модуль для сайта, который будет генерить сайтмап
http://seozoo.ru/tools/pagesinindex
Ошибается в чем? Там ведь можно настроить получение всех данных не из его базы, а прямо от яндекса, гугла, линкпада и остальных - тут он ошибиться не может, просто удобно выводит информацию из других сервисов.
Приведенные выше параметры рдс-бар берет напрямую с поисковиков.
Действительно полезный сервис , точно считает.
Только не понял как он получает "постоянных посетителей" ?
Выше же написано:
Кидайте в ЛС сайт по которому нужны данные, помогу, чем смогу... ;)
У меня показывает тиц 20 у домена. Исправьте.
https://ru.serpseeker.com - всё просто и интуитивно понятно и от 2 копеек за запрос... ☝
Такой сервис не трудно сделать для яндекса.
1) в яндекс XML можно вывести одним запросом 100 URL вашего сайта, стоит 1 лимит.
1 000 URL - 10 лимитов.
10 000 URL - всего-лишь 100 лимитов.
2) если у сайта есть sitemap.xml парсим из него все URL
3) если у нас есть все URL из яндекса, и все URL из sitemap - можно выделить URL'ы которых нет в яндексе но есть в sitemap - это и будут непроиндексированные страницы.
Если найдется спонсор, могу сделать PHP скрипт.
проблема лишь в том, что Яндекс не выдает больше 1000 результатов по любому запросу...
Сегодня наблюдаю нормальную работу по выводу количества страниц в индексе, может починили? У всех нормально?
Вроде ок стало. Просмотрел несколько запросов которые позавчера не совпадали с органикой, сейчас нормально.