S3-like storage

Vasiliy Romaneev, [28.08.18 00:36]
Я действительно спрашиваю - как у вас - сколько нод, какие диски, иопсы, чтение/запись и прочее.
Чтобы понимать на что ориентироваться.

Марк ☢️ Коренберг, [28.08.18 00:37]
без ссд получаешь около 200 иоспсов в идеале на один поток.
надо три реплики. с 2 — апасна
соответственно, верхний предел по иопсам — сумма всех иопсов всех винтов поделить на 3.
под журналы лучше выделять ссд — тогда всё сильно лучше становится, на пиковых нагрузках на запись особенно.
без 10 гбит вобще нехер рассматривать.
потому что как минимум, при ребалансе (потере диска или ноды) будет пиздец

Vasiliy Romaneev, [28.08.18 00:39]
3 реплики - 7 хостов минимум.
10G + 2*ssd + 2*sas/sata

Марк ☢️ Коренберг, [28.08.18 00:40]
почему 7 хостов....3 хоста минимум так-то

Vasiliy Romaneev, [28.08.18 00:40]
на 5 хостов 3 реплики вроде не бьются.

Марк ☢️ Коренберг, [28.08.18 00:40]
бьются
это тебе не рейд
там срать сколько хостов
главное чтобы было минимум 3 диска. а как размазать реплики по дискам цеф сам сообразит.
да, минимум 3 диска, расположенных на разных хостах :)

Dmytro Pereuda, [28.08.18 00:41]
[In reply to Vasiliy Romaneev]
та поставь себе LisardFS и делов. у них гео репликация отложенная из коробка. будешь на свой рабочий кластер данные загонять, а оно за тебя на хетзнер перекладывать. да делов то