alexz15

alexz15
Рейтинг
96
Регистрация
18.06.2009
realcrimean:
а если будет несколько релевантных дескрипшенов?
возможно выводить на странице несколько мувиков с привязанными к ним релевантными основному ключу десками и регулировать количество настройками, например 3-5 на страницу ?

Да, можно выводить несколько мувиков с дескрипшенами, релевантными текущему кею.

exarh:
То чувство когда alexz15 спер идею TopperHarley

Просто открыл первый пост и прочитал, что хочет ТС... И нашел решение задачи по своему усмотрению. К тому же, релевантные строки я уже реализовывал ранее в предыдущих версиях.

exarh, если не знаешь наверняка - молчи) Пустые слова не красят человека ;) Не в обиду.

http_Andrew:
Где почитать про этот макрос на форуме сеодора?

На форуме описания нет, макрос будет добавлен в обновлении. Но если он нужен уже сейчас, то напиши на форуме сеодора в лс и я скину тебе его в виде пользовательского макроса.

На Cеодоре это можно организовать через пользовательский макрос (код уже есть), например:

{{ @L_RELATED_TXT('file.txt') }}, где file.txt - "embed|description" с новой строки. Выведет релевантную строку текущему кею из file.txt.

PS. В обновлении это будет встроенный макрос, а не пользовательский.

Можно вообще не использовать базу "embed|description", а просто парсить уже встроенными макросами:

{{@Q_VIDEO_EMBED()}}

{{@DONOR_CONTENT(' ',3,5)}}

Обновление доргена.

Обновил плагин макросов для N++ под новую версию.

Проведен второй тест на том же тарифе стандарт, от 1 до 10 запросов в секунду с Танка.

В базе 60к новостей, из них около 10к закешированных.

Скачать отчет.

realefs:
давай без сферических коней в вакууме.
например https://tech.yandex.ru/tank/ что покажет (раз уж боевого крещения небыло)?

проведен первый тест на нагрузку на тарифе "стандарт".

https://embed.gyazo.com/acf0fdc228104df1241f267925c67d5d.jpg

Отчет и графики смотрите в архиве.

Арамис:
Доброго времени суток, у меня такие вопросы к вам:

1. Сбор ключей генерится в новой версии внутри программы или самому парсить надо
2. Есть ли в вашей программе функция разрастания нч с добавлением хвостов к ним
3. Существует ли автозаполнение тайтла на основе анализа ключей и также добавление хвоста к тайтлу
4. Сколько за раз можно генерировать дорвеев в количестве
5. Время генерации дорвеев
6. Можно ли указывать количество страниц в дорвее в ручную или это зависит от кол-ва нч
7. Что по поводу шаблонов - с имитацией движков или самим добывать либо у вас нет заказ

Вопросов у меня еще очень много, но не буду надоедать. Прошу вас ответить только на эти. С уважением Рамис.

Здравствуйте,

1. Дорген ключи не парсит. Они добавляются либо вручную через админку (или мастер новых доменов), либо при "тихой" установке - все настройки указываются заранее до импорта кеев.

2. При парсинге можно генерировать новые страницы из Тайтлов сниппетов - т.н. режим роста (макрос SNIPP_URL).

3. Не совсем понял вопрос. Но если это касается тега <title>, то при редактировании шаблона к тайтлу можно добавить что-либо через другие макросы.

4. Я бы добавлял штук по 20-30 новых доменов за один заход. Но это индивидуально для каждого и каждый рассчитывает на свое кол-во ключей в файле (например, если один файл кеев для пачки доменов), подготовлены ли ключи отдельно для каждого домена и другие факторы.

Далее генерация идет по крону. Чем мощнее сервер, тем больше копий крона можно запустить, тем быстрее будут кешироваться домены.

5. Здесь время зависит от шаблона (макросов в нем) и кол-ве кеев, которые нужно закешировать (отложенная или не отложенная публикация). В среднем время генерации одной страницы ~3-10 сек. В новой версии сделан упор на качество спарсенного контента и меньше упора на скорость, т.к. кешированием занимается крон. Сейчас при ошибках парсинга дорген пытается спарсить другой сайт, пока не добьется желаемого результата. А для ботов быстро отдаются уже закешированные новости.

6. Количество страниц зависит от кол-ва импортированных кейвордов. Можно также указывать, сколько страниц должно генерироваться в сутки и в какое время (например с 8:00 до 23:00).

7. Шаблоны пока что делаются вручную. Позже добавлю конвертер шаблонов с WP. Шаблоны также можно заказать на форуме у пользователей, которые согласятся делать шаблоны на заказ.

Если будут еще вопросы - задавайте) С уважением Александр.

sealo:
Интересно, покажите htop на сервере при хотябы 3к доров ну и когда гугл на них находится.

Обязательно покажу, как только это будет возможно.

---------- Добавлено 25.10.2016 в 01:32 ----------

master_jeday:
Какие-то макросы новые будут по сравнению с четверкой?

Выше был вопрос про чистоту спаршенной текстовки. Тоже интересно, как с этим обстоят дела - нет ли обрывов предложений, мусора в текстах именно из коробки. Или придется своими регулярками-костылями допиливать?

Примеры юзер макросов также хотелось бы увидеть, и чтобы была возможность их у тебя заказать, пусть и за деньгу ;)

Новые макросы будут при необходимости.

Качество текстовки улучшено по сравнению с предыдущей версией. Примеры пока показать не могу, но на видео можно посмотреть что получается - там спарсенный контент еще обработан макросом стыковки по запятым и другими символами.

Юзер макросы добавляются в определенный файл php. Вот пример макроса <example_tags />, который выводит "теги":

	/*

* Example macros <example_tags />
* <example_tags sep=", "> {{@MY_L_QUERY}} </example_tags>
* Returns "tags": word1, word2, word3 ...
*/
function example_tags($text, $attributes) {
$text = remove_short_words(trim($text), ' ', 3); // removing words that are shorter than three symbols
if (!$text) return '';
$sep = $attributes['sep'] ? $attributes['sep'] : ', '; // attribute "sep"
$expl = explode(' ', $text);
shuffle($expl); // shuffle an array
return mb_strtolower(implode($sep, $expl));
}

Также подготовлена платформа для написания своих модулей.

twiprogon:
такой наивный, думаешь создатели доргенов - это успешные дорвейщики ?

Каждому свое. Кто-то что-то пишет, кто-то этим пользуется. Я не отрицаю, что дорвеями давно не занимался. Знаешь почему? Потому что в это время я занимался созданием нового продукта. Да, пока ты колотил бабло, я просто работал. И я понимаю, что от работы кони дохнут. Но не смотря на это, мне вот ну очень хотелось выпустить это обновление. На радость всем, ну или многим, надеюсь)

realefs:
давай без сферических коней в вакууме.
например https://tech.yandex.ru/tank/ что покажет (раз уж боевого крещения небыло)?

Вот давай и протестируем вместе. Я предоставлю для этого версию с закрытым кодом. Так все и станет на свои места)

Всего: 211