mazday
Expert
Expert

б/у NAS/NFS storage за 1 к$ и за 2 k$ с аукциона ebay

Привет всем. Нужны советы и мнения...

Появилась возможность купить железку на которой можно "пощупать" все вкусности от Вмваре.

На запрос NAS storage на eBay выдает море вариантов. И как в этом всем разобраться ума не приложу. Есть варианты и сразу с дисками, и без дисков.....

Хотелось бы получить советы.

Во первых - что бы такое почитать (кроме блогов и форумов) по организации СХД. Желательно книга или цикл статей, для получения теоритических знаний.

Во вторых что можно взять на eBay за 1к и 2к, что бы не хлебануть проблем с совместимостью с vmware ESXi3.5 (или 4.0). Ну и чтоб потом не было проблем с фирменными дисками и др. комлектухой к СХД, а можно было "наши" не брендовые диски добавлять.

Из просмотренных мной вариантов нашел такие 3 типичных стуации.

1. Железка, на которой локально подключены винты, и на нее ставится ОС, где програмно реализуется NFS. Получается что это обычный комп, просто с возможностью локального подключения большого колличества дисков. (как пример супермикро на 3 юнита)

2. Железка с локальными дисками где стоит встроенная система (урезанный линух) и управляется все через WEB морду... (например Qnap -ts-809-rp, на qnap.com есть специфиации)

3. Это более серьезные системы которые работают в комплексе. Т.е. имеется модуль выполняющий роль "мозга" и к нему подключаюстя полки с дисками. Мне тут больше всего приглянулся NetApp. Но тут все не так очевидно, и боюсь склонять руководство к такому выбору, т.к. не факт что потом получится все это запустить. Может кто на пальцах раскажет как это все соединяется между собой?

зы

уж очень хочется перебраться с использования локальных дисков на NFS хранилища для ESXi серверов.

Tags (2)
0 Kudos
13 Replies
mazday
Expert
Expert

Вот например ссылка на NetApp FAS 2020

Там судя по описанию есть и полка и "мозги"

Included:
FAS2020-12-X282B-R5-CFAS2020,Disk Shelf,12x500GB SATA,-C,R5
FAS2020-BASE-R5-C FAS2020 Base Appliance,-C,R5
X5518A-R6-C Rackmount Kit,FAS2020,-C,R6
X800E-R6-C Power Cable North America,-C,R6

0 Kudos
MKorotko
Expert
Expert

мое мнение лучше брать не б.у, а собрать самому или же покупать новое.

за 2К зеленью можно собрать ну очень хорошую машинку с хорошей дисковой подсистемой и парой хороших сетевых карт. Поднять на ней Linux или Windows и програмный iSCSI или же NFS. Как раз это первый вариант.

Второй вариант как бы продолжение первого, только обычно производители сами уже все затачивают и оптимизируют. Все таже железка, комп, с урезаной операционкой и сетевыми службами и т.п.

3-й вариант лучший, но нормальные системы стоят от $8К зеленью, естественно новые.

Если рассматривать первый и второй вариант, я бы выбрал первый вариант. Выдет дешевле, но придется повозится.

вообще для чего Вам нужен сторадж? надо изходить из этого. Что важнее производительность, надежность, цена?

а и конечно я бы лучше использовал не NFS, а iSCSI.

-


VMware vExpert 2010, 2011 - http://vm.pro-it.kz
0 Kudos
EGarbuzov
VMware Employee
VMware Employee

По поводу NetApp'а можно по-русски почитать тут

Где-то там была серия постов про "NetApp с нуля" Smiley Happy

0 Kudos
mazday
Expert
Expert

вообще для чего Вам нужен сторадж? надо изходить из этого. Что важнее производительность, надежность, цена?

Сейчас часть серваков, котоыре построены на платформе s3000 (intel SR1530SH) и s5000PAL (SR1550 SR1500). На них невозможно собрать RAID который "схавает" ESXi.

В итоге, в худшем случае, на сервере есть два диска на 7200 об.мин и никакой надежности (избыточности). В среднем на таком сервере от 6 до 10 виртуалок. Для этих серваков NAS стал бы спасением. Но нужно убедить руководство что нужно перейти на NAS, а сделать это предложили покупкой одного - двух устройств.

Т.е. предположительно надо два стоража, один на пару терабайт, (побыстрее) и один на 4-8 Тб (для не критичных виртуалок).

Сможет ли стораж из 6 дисков обеспечить работу 30 виртуалок с производительностью сравнимой при локальных дисках на ESX серверах (DAS). Если да, - то все круто...

А уже если первый опыт внедрения будет удачным, то можно будет "расшатывать" руководство на покупку в 10-20 к$, где поселить добрую сотню виртулалок (это ведь реально?)

0 Kudos
michigun
VMware Employee
VMware Employee

>а и конечно я бы лучше использовал не NFS, а iSCSI.

почему?

Для 4ки еще нет данных, а для тройки данные по сравнению такие:

NFS если и медленнее, то чуть чуть, а накладные расходы много выше, когда инициатор программный.

см. http://media.netapp.com/documents/tr-3697.pdf






--

http://www.vm4.ru/

http://wiki.vm4.ru/

-- http://www.vm4.ru/p/vsphere-book.html
MKorotko
Expert
Expert

Сможет ли стораж из 6 дисков обеспечить работу 30 виртуалок с

производительностью сравнимой при локальных дисках на ESX серверах

(DAS). Если да, - то все круто...

В сравнение с локльными дисками, думаю NFS не сможет конкурировать.

"расшатывать" руководство на покупку в 10-20 к$, где поселить добрую сотню виртулалок (это ведь реально?)

Это реально. Только дорого. Хороший сторадж iSCSI с несколькими контролерами и забитыми дисками SAS (скажем 10-12 шт по 300Гб\15К) будет стоить от $18-20K

почему?

Для 4ки еще нет данных, а для тройки данные по сравнению такие:

NFS если и медленнее, то чуть чуть, а накладные расходы много выше, когда инициатор программный.

iSCSI более функциональнее вот и все. Для 4-ки еще не ясно, а для тройки согласен програмный инициатор более накладен. Нужно исходить из нужд, если производительности будет хватать, то я выбрал бы программный iSCSI. Если все в притык, то конечно NFS.

если исходить из задач размещение большого числа ВМ и их производительности, то однозначно хорошую железку нужно с аппаратным iSCSI, ну и конечно пару хороших коммутаторов.

-


http://vm.pro-it.kz

VMware vExpert 2010, 2011 - http://vm.pro-it.kz
0 Kudos
EGarbuzov
VMware Employee
VMware Employee

MKorotko wrote:

Сможет ли стораж из 6 дисков обеспечить работу 30 виртуалок с

производительностью сравнимой при локальных дисках на ESX серверах

(DAS). Если да, - то все круто...

В сравнение с локльными дисками, думаю NFS не сможет конкурировать.

Для начала, я думаю, стоит посмотреть что это за машины. Интенсивно они обращаются к диску или нет. Выделенной гигабитной сетки под NFS может и хватить.

0 Kudos
mazday
Expert
Expert

Для 4ки еще нет данных, а для тройки данные по сравнению такие:

NFS если и медленнее, то чуть чуть, а накладные расходы много выше, когда инициатор программный.

см.

На шестой странице http://screencast.com/t/Xe6ia8mGg есть схемка содинения.

Меня интересует пока проинвестигать минимальную конфигурацию, т.е. например: я беру NetApp FAS2020 (500$ изначально, к примеру образец) и беру к нему полку DS14 (центы около 1000 - 2000 $ такой (№1) или такой (№2)).

После этого "мозг" FAS2020 подключаю в HP прокурва 2810 и тудаже ESX сервера. Все? могу юзать? т.е. я обхожусь только Ethernet, без FC?

А можно ли обойтись без дисковой полки, ведь в мозгу тоже есть диски? И еще, каким образом к мозгу подключаются дисковые полки? (может нужны спец кабели, которые идут/не идут в комплекте)?

Если такой вариант работоспособен, то выходит что в 2000 у.е. можно вложиться....

Кто что скажет?

0 Kudos
MKorotko
Expert
Expert

> Для начала, я думаю,стоит посмотреть что это за машины. Интенсивно они обращаются к дискуили нет. Выделенной гигабитной сетки под NFS может и хватить.

естественно в начале необходимо проанализировать работу машинок с дисками.

Еще бы найти еще одну машинку для тестов, поднять на ней NFS. Перенести туда часть ВМ и погонять. Тогда картина станет яснее и будет понятно что нужно.

UPD

После этого "мозг" FAS2020 подключаю в HP прокурва 2810 и тудаже ESX сервера. Все? могу юзать? т.е. я обхожусь только Ethernet, без FC?

с такой железкой я не работал. все работает по Ethernet(NFS, iSCSI). Для своей сетки данных желательно выделить отдельный vlan, а еще желательно в esx трафик vmkernel привязать на отдельную сетевую физическую.

-


http://vm.pro-it.kz

VMware vExpert 2010, 2011 - http://vm.pro-it.kz
michigun
VMware Employee
VMware Employee

>SCSI более функциональнее вот и все.

да кроме RDM он ничем и не отличается.






--

http://www.vm4.ru/

http://wiki.vm4.ru/

-- http://www.vm4.ru/p/vsphere-book.html
0 Kudos
EGarbuzov
VMware Employee
VMware Employee

<span class="jive-thread-reply-body-container">&gt; А можно ли обойтись без дисковой полки, ведь в мозгу тоже есть диски?

Судя по описанию, да есть диски и в голове, 12x 500Gb SATA.

<span class="jive-thread-reply-body-container">И еще, каким образом к мозгу подключаются дисковые полки? (может нужны спец кабели, которые идут/не идут в комплекте)?

Не берусь утверждать, но судя по этому pdf (раздел 4) полки к FAS2020 подключаются по FC, а значит необходимы соответствующие кабели, которых в комплектации на ebay нет.

0 Kudos
mazday
Expert
Expert

Вроде все красиво получается, кабели для полки (если ее брать) можно наверное и отдельно найти на том же eBay.

Есть еще одна деталь, полки (и голова) идут с дисками SAS.

а на сайте есть информация http://www.netapp.com/ru/products/storage-systems/fas2000/fas2000-tech-specs-ru.html Там в разделе "Технические характеристики хранилища" указано на поддежку дисков.

На сколько я понял, голова поддерживает только SAS диски а полки могут FC или SAS (и сюда же SATA) диски.

Так вот вопрос, можно ли напихать обычных дисков, которые я куплю в любом магазе. Или нужны брэндовые диски (как любит Dell и HP) которые стоят не слабо....

зы

Как уже отмечено выше, мне поручео поднять на Intel SR2500 (s5000PAL) програмный NFS из 5 дисков на 7200 об. в минуту. И попробывать покрутить на нем виртуалки.. посмотреть что будет раньше "издыхать" диски или сеть.

Спасибо всем, за то что отозвались!

0 Kudos
EGarbuzov
VMware Employee
VMware Employee

<span class="jive-thread-reply-body-container">кабели для полки (если ее брать) можно наверное и отдельно

Мы когда-то заказывали отдельно несколько таких шнурков, т.ч. физически это должно быть возможно. Вопрос, за какие деньги...

<span class="jive-thread-reply-body-container">На сколько я понял, голова поддерживает только SAS диски а полки могут FC или SAS (и сюда же SATA) диски.

Не похоже, что голова поддерживает только SAS. Сравнив разделы "Масштабируемость" и "Технические характеристики хранилища" получается, что внутренними дисками они называют диски в голове, а внешние - в полках расширения.

Поддержка дисков в новых конфигурациях

SAS: 300 ГБ, 450 ГБ

FC: 300 ГБ

Внутренние диски SATA: 500 ГБ, 750 ГБ, 1 ТБ

Внешние диски SATA: 500 ГБ, 750 ГБ, 1 ТБ

Т.ч. должны в голове и SATA поддерживаться. Тем более, что в IBMовских стораджах, если не ошибаюсь, везде где сталкивался можно было в SAS ставить и SATA.

ps:

<span class="jive-thread-reply-body-container">можно ли напихать обычных дисков, которые я куплю в любом магазе. Или нужны брэндовые диски (как любит Dell и HP) которые стоят не слабо....

Думаю, окончательных ответ лучше всёже узнать у самого NetApp'а.

0 Kudos