NothingMatters

NothingMatters
Рейтинг
45
Регистрация
12.06.2017
Сайт при чём - на платном хостинге, так что тут только Вордпресс

Замечательная логика

postavkin:
100тыс запросов, это вообще все возможные комбинации фильтра.
Понимаете от куда такое число?

Так я и говорю: зачем делать эти запросы?

У тебя всего 2к товаров. 1 запросом забираешь их из БД и делаешь туже самую фильтрацию на стороне скрипта, а затем результаты (ID товаров подходящих под фильтр) записываешь куда тебе нужно батчами.

В итоге у тебя вместо 100к запросов будет 1 на выборку и штук 10 батчей на запись.

postavkin:
NothingMatters, не кешировать. Записываем в бд id товаров соответствующих тому или иному варианту фильтрации товара.
Когда юзер фильтранул, просто берем список id из БД соответствующих его запросу.

Есть основания так сделать заранее (запись в бд). Пока что не хотел бы их (основания) разглашать. В тестировании.
Понимаю, что "на лету" это все просто формируется...

Ну это кеширование ответа.

Можно тупо сделать выборку всех товаров, фильтрануть их на стороне скрипта, и в БД уже записать результат батчем.

Не вижу смысла делать сотни тысяч запросов тут.

postavkin:
Psionik, _SP_
Как то так, вообщем. Условно составили ответы для запроса в фильтре заранее, записав их в бд.

Что-то очень и очень странное. Зачем кешировать запросы фильтра?

На 2к записей выборка должна быть чуть быстрее чем скорость света.

Ок, хотим кешировать фильтры, так давайте кешировать популярные (по мере их поступления), зачем кешировать все подряд?

wpgrabber,

Буквально только что зашел на один сайт. И бинго, 6 пунктов из 10 (пуш, чат, подписка, социалки, маты, забыл зачем пришел).

Ну хоть поведенческие им подпортил.

Lenkoo:
На любителя все это. А меня радуют наоборт. Особенно лайки))

Ну вот можешь и дальше своими ложноножками по ложнокнопочкам лайки ставить.

Я прям чувствую как после 30 минут в ВК мой ICQ падает на 100 пунктов.

Togelta:
NothingMatters, детей то не оскорбляйте :) Каждому свое, растем, меняемся...

Ну вот как до прямоходячих эволюционируют - тогда можно будет с ними общаться 🍿

foxi:

это нам старперам оно отвратительно, а всем кро помладше не понятны эти старинные форумы.

Так я и уточнил, что для планктона там привычная среда обитания.

Меня лично пугают все эти социалки, с непонятным функционалом. Лайки, репосты, друзья - ересь какая-то.

_SP_:
Вы смеетесь что-ли ?
Исходя из личного опыта - собирается инфа довольно просто довольно простыми парсерами.
Хуже всего ситуация с фотками с говнохостингов, там да, могут быть нюансы.
Форумы слава богу довольно сильно структурированы...
В принципе, можно под популярные стандарты сделать парсеры, но будет недешево, не миллионы долларов, но тысячи так уж точно.
Под нужды ТС-а действительно лучше пользоваться яндексом...
ЗЫ. Еще надо не забывать, что под сам парсинг форумов тоже нужно железо + прокси. И это нифига не 3 копейки.

ТС хочет со всех форумов (вообще со всех в сети) получать актуальную инфу по нужной ему теме.

ТСа не устроят только популярные форумы. Он же четко написал что ПС по его запросам находят контент только на популярных форумах, а на остальных "ничо нету".

Так что думаю ценник в $500kk вполне адекватный за ежедневное сканирование, индексирование и хранения миллионов форумов.

БОЧ рВФ 260602:
Дядя ты меня слышишь :) Я говорю стена этого сообщества является форумом (местом для общения)... а на стене 77 658 записей (топиков)... что при среднем количестве ответов равном 10 - мы и получим 776580 сообщений...

А теперь попробуй получить ответ на вопрос который был задан пару дней назад.

Вот тупо не было онлайн людей которые могли помочь, и твой вопрос улетел на 10 экран скролинга, думаешь кто-то долистает до туда через 2-3 дня?

Реализация групп в соц.сетях отвратительная. Возможно для хомячков с IСQ в районе 20 оно и подходит, но для полноценного форумного общения - нет.

Всего: 468