GoRSS

GoRSS
Рейтинг
138
Регистрация
29.07.2013

Господа, а как вам такая схема?

  • 1. Собираем тематичные дропы скриптом /ru/forum/1011758
  • Берём их, вешаем 301 на основной
  • Выгружаем ссылки, кладём в html-файл и ссылаемся на него в нескольких местах

?

-Ren-:
Добрый день!

Нужен дроп по тематике "недвижимость", желательно с регионом Украина, начать можем с DR>15.

Что для этого нужно от меня?)

Добрый. Напишите в телегу или скайп http://seoarsenal.ru/index.php?contacts . Но обратите внимание, поиск ведется по метрике DA, а не DR. Domain rating планируется, но пока его нет.

master_jeday:
По вебархиву имеется в виду? Или свой архив сайта выкачивается?

В вебархиве.

Тема актуальна, софт развивается, возможности растут. Если вам нужна какая-то экзотика в плане географии, то это реализуемо.

Вариант услуги, т.к. уже не первый человек выбрал такой вариант: список свободных доменов, порядка 300 штук, за 30$. За эти деньги вы получаете таблицу адресов в таком виде http://seoarsenal.ru/?scr=1 . Низкая цена обусловлена тем, что выбор домена вы сделаете уже сами.

master_jeday:
Не понял, скрипт парсит просто листинги expired доменов и проверяет на занятость? Не очень ясно, в чем отличие от любого сервиса с абонентской платой, в части поиска дропов. Там тоже отфильтровать по DA можно, по ключам и также видно какие свободны.

Ответа так и не последовало. Такой вопрос звучит не впервые.

Ответ: поиск идёт по архиву, по вхождению в тайтл. Если тайтл релевантен запросу, то каковы шансы что сайт в целом тематичен? В случае варианта из вопроса в цитате, это тоже метод, хоть вы и ограничиваете себя одними вхождениями.

Новую тему стартовать рано, появились новые планы внедрения, потому это позже, а пока продолжаю в этом топике.

Обнова 1.5

+ Парсинг архива в 5 потоков против одного ранее

+ Количество потоков при пробиве первички вынесено в настройки, у меня стоит 20. Можно до 50, как ваш сервер потянет.

+ Заменён источник whois на более шустрый, а также многопоток к нему (4 потока). В случае бана на нём (из 10 человек выхватил один) можно переключить в настройках на резервный, но однопоточный. При проверке по whois первыми чекаются зоны com и net как наиболее быстрые.

+ Отображение колонок, как и обещано ранее, теперь можно настроить и скрыть не интересующие вас данные.

+ Торможение при открытии проекта, когда в нем много ключей и все они отображаются одной страницей, исправлено. Постраничное разбиение, 100 ключей на странице. Первыми теперь ключи, которые не собирались, чтобы не листать в случае остановки сбора и возврата к нему позже.

+ Сортировка списка доменов по адресу (алфавит), DA, PA, moz, semrush и количеству снимков в архиве. Пока что не работает при фильтрации по вхождению в домен.

+ В 10, а может и в 100 раз ускорено удаление проекта. Разом его удалить нельзя, чтобы не потерялись пересекающиеся с другими проектами домены.

Текущий лист ToDo:

= Проверка наличия домена в индексе Гугла

= и Яндекса

= Съем данных ahrefs по их API (нужен акк)

= Проверка наличия в прошлом счетчика liveinternet

= Импорт собственного списка доменов из файла, импорт ключей из файла

Сама обнова в канале в телеге. Заменить файлы, нажать "Обновить" в меню.

---------- Добавлено 30.04.2019 в 04:19 ----------

--------Обновленные тесты-----

444 ключа, ключи РУ, основная масса доменов РУ. Сфера Гэмблинг Ру.

Старт в 2:08

Сбор архива завершен в 2:12, занял 4 минуты, по минуте на 100 ключей

Проверка первички в 20 потоков, старт в 2:12, очередь 2052 домена. Завершено в 2:15, 3 минуты, по минуте на 680 доменов.

Проверка whois, старт в 2:15, очередь 700 доменов. Завершено в 2:17. По минуте на 350 доменов.

Итого с 444 ключей вышло 2052 домена, свободными из которых оказалось 462 доменов.

481 ключ, ключи EN, основная масса доменов com/net. Сфера Гэмблинг En.

Старт в 2:21

Сбор архива завершен в 2:33, занял 12 минут, по минуте на 40 ключей. Скорость отличается от первого теста по 3 причинам: результатов в 2.5 раза больше, более длинные доменные имена и наличие элементов других проектов в базе.

Проверка первички в 20 потоков, старт в 2:33, очередь 4736 доменов. Завершено в 2:47, 14 минут, по минуте на 340 доменов.

Проверка whois, старт в 2:47, очередь 1800 доменов. Завершено в 2:52. По минуте на 360 доменов.

Итого с 481 ключа вышло 4736 домена, свободными из которых оказалось 1287 доменов.

Субъективно. На всех своих сайтах использовал SEF-урлы, несколько лет назад плюс был, в сниппете подсвечивалось вхождение у урл.

Плюсы:

1. Посетитель легче ориентируется в навигации.

2. Понятен уровень вложенности страницы, видно что есть раздел выше, мол есть связанные разделу страницы.

3. Эстетика урла.

4. Спрятаны GET-параметры.

Минусы:

1. Нагрузка на базу, поиск по числовому идентификатору быстрее, чем текстовый.

Если у вас двиг и ЧПУ включается по клику, то не вижу проблемы включить. Если пишете код сами, то смотрите на наличие времени, готовы ли тратить.

Пруф: https://yandex.ru/search/?text=site%3Astavmatic.com&lr=35&clid=9582 . ПФ сумасшедшие, урлы были вида сайт/1/3/ , т.е. категория и статья (чемпионат и команда). Перевел на ЧПУ с названиями команд, трафик на том же уровне (2 месяца прошло, всё переиндексировано).

Если ищете технические способы оптимизации для роста, то оптимизируйте скорость индекса, в частности last-modified.

master_jeday:
Там тоже отфильтровать по DA можно, по ключам и также видно какие свободны.

Ключам в домене? Вхождениям?

Обновление 1.4

В целом, 2 из 4 этапов кратно ускорены, а также ошибочное определение занятости сведено практически к нулю.

Нововведения:

+ Первичка ускорена во много раз, за секунду пробивается 1-4 домена. Ранее запрашивались хидеры серверов, теперь IP-адрес, что отрабатывает значительно быстрее

+ Ускорен парсинг WHOIS, 10 доменов за 1-2 секунды. Нестабильно чекаются info и org, но домены никуда не деваются, если не пробился, то перекладывается в лист ожидания повторной проверки. Фикс через 1-2 дня.

+ В связи с изменениями в структуре базы (поле перечисления проектов, в которых есть домен), при обновлении домены из версии скрипта 1.3 "чинятся", привязываясь к проектам. Новые домены привязываются штатно, в процессе парсинга.

+ В настройках новая опция, что делать с импортированными (собственными доменами). Варианты: штатно проверять, начать сразу с WHOIS или они априори свободны и сразу чекать на DA PA.

Производительность:

+ внесены изменения в структуру базы, за счет этих изменений ускорена проверка первички, whois, moz и листа ожидания проверки первички

+ кратно ускорена фильтрация свободных доменов по вхождениям

Фиксы ошибок:

+ исправлена ошибка при обновлении базы (при проверке существования поля с целью его добавления в случае отсутствия скрипт спотыкался об ошибку базы)

+ счетчик остатка для первички, whois и moz возвращен в рамки проекта (ранее "глобальная очередь" по всем доменам)

Установка: заменить файлы из архива в корне, запустить обновление из меню.

Это сообщение последнее в этой теме. После выхода обновы №5 будет создана новая, более презентабельная, лишенная сумбура, тема.

Сегодня-завтра будет обновление 1.4. Цена возвращена на уровень 170$, повышение отложено.

В подбор добавлены зоны fi se ro ee lv lt de dk pl no bg.

Всего: 1012