Изменения

Производительность Ceph

88 байтов добавлено, 18:49, 10 ноября 2018
Нет описания правки
Дано: 3 компа с 3x 7200rpm SATA HDD (в одном 4x HDD, но не суть важно), с 1 SSD (десктопным) под систему и ceph-mon и с 1 SSD (старым, но серверным) под журналы. Не самая быстрая 10-гигабитная сеть — флуд пингом средний RTT (задержка) 0.098ms. Развёрнут Ceph + OpenNebula с KVM. Диски под Ceph форматируются в Bluestore утилитой ceph-volume (используют LVM). Диски виртуалок лежат в обычном реплицированном ceph pool с size=3.
Создаём Debian-виртуалку(настройки диска kvm по умолчанию — bus=virtio, cache=none), ставим fio, запускаем в ней тест на задержку транзакционной случайной записи: {{cmd|1=fio -ioengine=libaio -size=10G -sync=1 -direct=1 -name=test -bs=4k -iodepth=1 -rw=randwrite -runtime=60 -filename=./testfile}} (или можно не случайной, тогда rw=write, но результат идентичный).
# Настройки по умолчанию — все кэши дисков включены (везде <tt>hdparm -W 1</tt>, в <tt>/sys/block/*/queue/write_cache</tt> везде <tt>write back</tt>) — Ж О П А, iops=59, avg lat = 16.88ms