Кто пользуется hetzner.de? - часть 8

НДС добавили для физиков.

Линк на обсуждение: /ru/forum/955187

cocacola, это цена CX30, а не CX20.

У кого серверы с nvme ssd, как у вас со скоростью resync'а?

Заменили умерший ssd, теперь mdadm синхронизируется, скорость упала до 72M/s

Похоже nvme заметно медленнее, чем те ssd "Data Center Series", либо драйверы недопилены еще?

echo 500000 > /proc/sys/dev/raid/speed_limit_min

echo 500000 > /proc/sys/dev/raid/speed_limit_max

Это интересная настройка, но дело где-то в другом.

max стоял на 200M/s, и в начале синхронизации примерно столько и показывало. Но в конце опустилось до 70M/s, и начал тормозить mysql - там было много лишних процессов со статусом "Openning table", хотя нагрузка была небольшая, продолжалось так до конца синхронизации.

замеры скорости надо производить без включенного mysql

ThePriest, при синхронизации учитывается текущая нагрузка на дисковую подсистему. Если в системе ничего не происходит, то скорость стремится к speed_limit_max.

Выражусь по-другому, проблема не в скорости синхронизации, а в общем nvme работает медленнее.

Особенно сильно это проявилось во время синхронизации.

Вот если есть люди которые пробовали и обычный "ssd datacenter edition", и nvme, как у вас с этим было дело?

нормально все с ними

Я бы так не сказал, другие тоже жалуются.

https://www.reddit.com/r/sysadmin/comments/4jlzkz/nvme_ssds_much_slower_in_random_writes_than_sata/

P.S.

Взамен Самсунга мне поставили новый Тошиба.

Судя по iostat, на нем %util немного ниже, await ниже, притом что операций чтений на него перенаправляется намного больше

Device:         rrqm/s   wrqm/s     r/s     w/s    rMB/s    wMB/s avgrq-sz avgqu-sz   await r_await w_await  svctm  %util
nvme1n1           0.00     0.00  949.48  775.97    28.15     6.49    41.11     1.81    1.05    0.98    1.14   0.47  81.19
md1               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00    0.00    0.00   0.00   0.00
md2               0.00     0.00 2736.60  769.37    80.14     6.48    50.60     0.00    0.00    0.00    0.00   0.00   0.00
md0               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00    0.00    0.00   0.00   0.00
nvme0n1           0.00     0.00 1787.17  775.98    51.99     6.49    46.73     2.24    0.87    0.80    1.05   0.30  75.62

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
          36.21    0.00    6.25   17.51    0.00   40.03

Device:         rrqm/s   wrqm/s     r/s     w/s    rMB/s    wMB/s avgrq-sz avgqu-sz   await r_await w_await  svctm  %util
nvme1n1           0.00     0.00  912.35  683.07    26.68     5.32    41.07     1.53    0.96    0.82    1.16   0.47  75.10
md1               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00    0.00    0.00   0.00   0.00
md2               0.00     0.00 2542.28  677.82    72.84     5.31    49.70     0.00    0.00    0.00    0.00   0.00   0.00
md0               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00    0.00    0.00   0.00   0.00
nvme0n1           0.00     0.00 1629.93  683.05    46.17     5.32    45.58     1.90    0.82    0.74    1.01   0.31  72.15

Возможно Самсунги себя те похуже вели, поэтому теперь ставят другие nvme.