On 5 июля 2013, at 14:39, Max Speransky
Ну там HA уровня ноды, т.е. образА виртуалок лежат на общем сторадже, поверх которого должна быть кластерная файлуха типа gfs2, когда со всех участников видно все. Кмк в этом случае лучше что-бы NAS отдавал сразу NFS, раз они умеют в него ходить, будет проще админить. Используют судя по всему Clustering Suite от редхата, не лучшее решение, но если есть гуйня которая конфигурит сразу то ок.
Схема вполне типовая, можно взять любой NAS, главное что-бы raid6, nfsv4 и много скоростных портов.
Меня больше всего смущает в этой схеме скорость доступа к дискам. Т.е. вот каждая фраза "поверх всего этого" говорит о очередном замедлении реальной скорости работы с диском, который уже будет видеть виртуальная машина. Ну и собственно остается вопрос о надежности qnap'овских дивайсов. И может кто еще с какими raid'ами имел персональный опыт общения и может что присоветовать или отсоветовать.
-- Taras Heychenko
HA там уровня check availability, т.е. скорость диска не сильно его должна
мучать, ведь переключение произойдет когда нода с контейнерами отвалицо и
сработает cluster availability timeout. Замедление надо компенсировать
"шириной" рейда, т.е. 10-12 быстрых сасов в raid6, например будут очень
быстро отдаваться по любой среде. Я имел опыт со всякими - qnap неплохой
бюджетник, Oracle круто и дорого, всякие EMC2 и Netapp тоже без нареканий
работали. Более всего мне нравился Sun Open Storage (Oracle ZFS), но это
чит, т.к. я был в команде разработки ). Но если это проект "за свои" или в
ограниченном бюджете - а на это указывает выбор kvm и проксмокс )), то пара
серверов+корзина с дисками и сасом (например Supermicro), немного настроек
линукса или готовая сборка типа openfiler, и будет отличное решение для
наса под виртуалки.
5 июля 2013 г., 14:51 пользователь Taras Heychenko
-- Yours, Max http://about.me/speransky http://idepositbox.com
Да они все эти "сторы" в большинстве случаев просто линукс/соляра/бсд со
своим проприетарным гуи. Если будет баг в kernel, то они мало что смогут
сделать. Но у Нетаппа свои наработки, у EMC2, в в ZFS storage был
специальный патчсет на соляру который не попадал в общее дерево. Поэтому
мое мнение такое - если надо из коробки и дешево, то стоит брать что-то на
соляре или линуксе, сорри за бсд, но там нету iser. Потратить деньги в
интерпрайсе - нетапп, у них тренинги в С-Ф классные ))
Ну и 18Тб это не серьезно - в текущем проекте в одной ноде 5u высотой
только 252 Tb raw capacity ) для данных до 50Тб достаточно имеджи держать
на тех же нодах где и машины, с drbd, выделить им с софтрейдом пару ядер,
главное сеточку быструю, можно круто сэкономить купив железки серверные
сразу с экнложе
5 июля 2013 г., 16:21 пользователь Vladimir Velychko
-- Yours, Max http://about.me/speransky http://idepositbox.com
Кому нужно больше 18ТБ на одной "голове" наверное могут и на лицензию
потратиться. ;-)
DRBD расстраивает необходимостью закладываться ровно вдвое на требуемые
IOPS'ы на выходе.
Кстати кто-нибудь пробовал ZFS под линухом? Интересно, дорос до продакшена?
:-)
2013/7/5 Max Speransky
-- VEL-[RIPE|UANIC]
Я пробовал %) начиная с внутренних релизов для LLNL. Я бы не стал его
пользовать в нагруженном продакшене, даже сейчас перфоманс низкий из-за
выбранной модели портирования - SPL отъедает где-то 15%. ZFS=Solaris, хоть
есть шансы получить поддержку.
А если перфоманс не важен то вполне стабильное, все таки им занимаются
серьезные пацаны, федералы уже кучу капусты влили, и судя по беседам с
Бехлендорфом весной - вольют еще. Другие бекенды которые используют zpool,
например Lustre, модифицируются что-бы избежать лишних copy-on-write и
block aligment, за счет этого разница ldiskfs/zpool всего 3-5%.
5 июля 2013 г., 18:37 пользователь Vladimir Velychko
-- Yours, Max http://about.me/speransky http://idepositbox.com
On 07/05/13 14:51, Taras Heychenko wrote:
Больше года безпроблемно работает Equallogic 4100E c пулом из нескольких XenServer. Особых требований по перфомансу нет, простой сетевой сторедж для нескольких десятков VM разного назначения без упора на дисковую производительность. XenServer, начиная со свежевыпущеной версии 6.2, умеет многие энтерпрайзовые штуки делать бесплатно (включая HA) А их StorageLink позволяет каждой виртуалке работать с volumes на Equallogic более-менее напрямую по iSCSI, минуя прокладки из LVM и файловых систем.
-- Andrey Lakhno
participants (4)
-
Andrey Lakhno -
Max Speransky -
Taras Heychenko -
Vladimir Velychko