LEOnidUKG

LEOnidUKG
Рейтинг
1776
Регистрация
25.11.2006
Должность
PHP
Интересы
Программирование

Не не, новая таблица не нужна. Мой код вполне шустро работает, я его ещё подкрутил, убрал DESC ID и arsort добавил в PHP, чтобы мускуль вообще не парилась.

---------- Добавлено 24.02.2012 в 21:39 ----------

AlienZzzz:
explain plan SELECT * FROM `cms_freepages` WHERE cat=2 ORDER id DESC LIMIT 37710, 30 в студию

С ораклом не путаете? explain plan?

А так уже писал в 3-й раз: /ru/forum/comment/10081908

:)

вот в нем вы откуда-то берете цифирьки для LIMIT?

Он для ВСЕХ записей, как я ID то найду всех в cat=2? ещё и нужные ID возьму?

Для этого уже netwind предложил вложенный запрос, он выполняется отлично. Прочитайте верхний пост мой :)

То с этим кодом проблема решена и тема топика исчерпана ?

Всё упёрлось сейчас в нагрузку на диск. С сервера убираются некоторые проекты на другой. Код прилично помогает, но просто диску пока не до мускуля и поэтому идут тормоза.

Но в любом случаи это быстрее, чем LIMIT, ещё надо проверить вложенный запросы, когда всё уляжется.

Dweep:
ТС, ответьте, плиз, на пару вопросов:

1. Сколько времени у Вас выполняется такой запрос:
SELECT `id` FROM `cms_freepages` WHERE cat=2 ORDER id DESC LIMIT 37710, 30

2. Как часто в этой таблице изменяются данные ?


Кстати яндекс и гугл не выводит более 1000 результатов в выдаче, вероятно потому что не смогли придумать как эффективно делать подобные запросы.

Я уже всё писал:

1. /ru/forum/comment/10081908

2. 1 раз в час

у нас уже есть острое ощущение, что у Вас диски на сервере накрываются или типа того.

Жестак новый, как и сервак. Тут проблема, что жестак очень нагружен, а вот кем, мы с админов не выяснили.

Поэтому придётся вырубать в слепую всякие форму и т.п.

Fearful:
Конечно уважаемый, продолжайте и дальше морочить людям голову.
Ни структуры таблицы не показали, ни explain запроса из первого поста.
И правильно, зачем, пусть телепаты напрягаются.

Так легче стало на душе?

Отображает строки 6150 - 6179 ( 6,247 всего, запрос занял 6.7226 сек.)

SELECT *

FROM `cms_freepages`

WHERE `cat` =4

LIMIT 6150 , 30

EXPLAIN:

id select_type table type possible_keys key key_len ref rows Extra

1 SIMPLE cms_freepages ref cat cat 4 const 6892

netwind:
Посмотрели бы уже план. Скорее всего 11 категория самая большая и он решил перебрать всю таблицу.

Да это глупости какие-то. Он самая маленькая.

Я уже убрал сортировку:

SELECT SQL_NO_CACHE id FROM `cms_freepages` WHERE cat =11

Отображает строки 0 - 29 ( 3,228 всего, запрос занял 0.0009 сек.)

EXPLAIN

id select_type table type possible_keys key key_len ref rows Extra

1 SIMPLE cms_freepages ref cat cat 4 const 3517

т.е. как бы всё очень быстро через phpmyadmin и все довольны.

Может тут что-то не так my.cnf на машине 2 ГБ памяти и 4-ре ядра.

[mysqld]

max_connections=150

safe-show-database

skip-locking

skip-innodb

skip-networking

safe-show-database

skip-name-resolve

skip-external-locking

query_cache_limit=2M

query_cache_size=128M

query_cache_type=1

max_user_connections=150

interactive_timeout=10

wait_timeout=20

connect_timeout=20

thread_cache_size=128

join_buffer_size=2M

max_connect_errors=9999999

max_allowed_packet=1M

table_cache=1024

tmp_table_size=128M

max_join_size=1000000

record_buffer=1M

sort_buffer_size=2M ## 1MB for every 1GB of RAM

read_buffer_size=2M ## 1MB for every 1GB of RAM

read_rnd_buffer_size=2M ## 1MB for every 1GB of RAM

thread_concurrency=12 ## Number of CPUs x 2

myisam_sort_buffer_size=64M

max_heap_table_size=65M

join_buffer_size=2M

key_buffer_size=300M

table_open_cache = 256

table_cache=300

table_definition_cache=300

log_queries_not_using_indexes

#log_slave_updates

log_long_format

[isamchk]

key_buffer=128M

sort_buffer=128M

read_buffer=32M

write_buffer=32M

[myisamchk]

key_buffer=128M

sort_buffer=128M

read_buffer=32M

write_buffer=32M

iopiop:
последний вариант который я вам предложил пробовали ? И все id собирать не надо, и серверу перебирать все записи не надо

Вот это?

кстати, вы не рассматривали вариант с передачей параметра типа where cat=2 and id > ... limit 25 ?

Можно расписать, что такое "id>" и откуда я его возьму? :)

---------- Добавлено 24.02.2012 в 13:28 ----------

Чёт я не врубаюсь смотрю запрос выполняется 27 секунд:

Query 27 Sorting result SELECT id FROM `cms_freepages` WHERE cat=11 ORDER BY ID

Через phpmyadmin c SQL_NO_CACHE 0,005 секунд

Я что-то не понимаю в этой жизни? :)

netwind,iopiop, да это опять доли секунды. Тут главное быстро собрать все ID категории и всё.

Fearful, конечно профессор, шли бы только мимо :)

netwind:

2 Пропускаете $page*$per_page строк с помощью функции mysql_data_seek не мучая php 37710 итерациями, как раньше. На php никакие строки не поступают.

ввести такое?

$i=0;
while ($rowclubs = @mysql_fetch_array($result))
{
if (($i>5*25)||$i<(5*25+25)) {
$arrayid[]=$rowclubs['id'];
}
$i++;
}

Ну мы тем самым лишь уменьшаем сам массив, это опять же доли секунды.

---------- Добавлено 24.02.2012 в 03:33 ----------

2 Пропускаете $page*$per_page строк с помощью функции mysql_data_seek не мучая php 37710 итерациями, как раньше. На php никакие строки не поступают.

Да конечно.

1.Из мануала, Замечание:

Однако, плюсы использования mysql_unbuffered_query() имеют свою цену: вы не можете использовать функции mysql_num_rows() и mysql_data_seek() с результатом запроса, возвращённым этой функцией, пока не будут получены все ряды. Кроме того, вы должны будете обработать все ряды запроса до отправки нового запроса, используя тот же link_identifier.

2. Если мы даже применим mysql_data_seek, то нам НУЖНО количество ВСЕХ записей для составления листинга.

Всего: 31521