HBA-адаптер мен сақтау контроллерін қалай таңдаймыз: SAS, Fibre Channel және RAID айырмашылығы

Адаптер таңдау бір сұрақтан басталады: дискілерді серверге тікелей қосасыз ба, әлде серверді ортақ сақтау желісіне шығарасыз ба. Бұл гайдта интерфейске, жылдамдыққа, порттарға, PCIe слотына және кабельге қалай қарау керегін қарапайым тілмен түсіндіреміз.
Бұл гайд сервермен күнде жұмыс істейтін адамдарға арналған. Компанияның жүйелік әкімшісіне, шағын серверлік бөлмені өзі жинап жүрген IT маманына, ескі сақтау жүйесін жаңартқысы келетін командаға пайдалы болады. HBA-адаптер мен сақтау контроллері сырттай қарапайым плата сияқты көрінеді. Бірақ қате таңдалса, сервер дискіні көрмей қалады, жылдамдық тек қағазда болады, ал кейде плата слотқа сыймай шығады. Сондықтан алдымен оны не үшін алып жатқаныңызды анықтап алыңыз: дискілерді серверге тікелей қосу үшін бе, әлде серверді ортақ сақтау желісіне, яғни SAN-ға қосу үшін бе.
Төменде негізгі параметрлерді ретімен қараймыз, жиі кездесетін қателерді айтамыз, соңында қазір қолда бар адаптерлерге қысқаша тоқталамыз. Мақсат біреу: сатып алғаннан кейін бәрі бірден жұмыс істесін, ештеңені қайта тапсырып, қайта іздеу керек болмасын.
Таңдағанда неге қарау керек
HBA ма, RAID-контроллер ме
Көп адам ең алдымен осы жерде шатасады. HBA (Host Bus Adapter) дискілерді немесе сақтау желісін серверге жалғайтын көпір ғана. Ол дискілерді массивке өзі жинамайды, әр дискіні операциялық жүйеге сол күйінде береді. RAID-контроллердің өз процессоры бар, ол дискілерді массивке біріктіреді, кей модельдері кэш жадымен келеді.
HBA мына жағдайларда ыңғайлы. ZFS, Ceph, Storage Spaces сияқты бағдарламалық сақтау жүйелерін қолдансаңыз, оларға дискілер тікелей керек, арада RAID тұрмауы тиіс. Сервер сыртқы сақтау жүйесіне қосылса да, массивті сол жүйенің өзі басқарады, ал серверге тек адаптер жеткілікті. RAID-контроллерді аппараттық массив керек болғанда аласыз, мысалы, жүйе дискілерін айналық массивке (RAID 1) салу керек болса.
| Түрі | Не қосады | Массивті кім басқарады | Қай кезде керек |
|---|---|---|---|
| SAS HBA | Сервер ішіндегі дискілер, дисктік полкалар | Операциялық жүйе немесе бағдарлама | ZFS, Ceph, бағдарламалық массивтер |
| RAID-контроллер | Сервер ішіндегі дискілер | Контроллердің өзі | Аппараттық RAID керек болса |
| Fibre Channel HBA | SAN желісі, сақтау жүйесі | Сақтау жүйесі | Ортақ сақтау, виртуализация кластерлері |
Интерфейс: SAS немесе Fibre Channel
Адаптерлер екі үлкен топқа бөлінеді. SAS HBA серверге дискілерді, дисктік себеттерді (backplane) немесе сыртқы дисктік полкаларды қосады. Мұндай адаптерлер әдетте SAS дискілермен де, SATA дискілермен де жұмыс істейді, бірақ мұны нақты модельдің құжатынан тексерген жөн.
Fibre Channel HBA мүлде басқа жұмысқа арналған. Ол серверді FC коммутаторы арқылы немесе тікелей сақтау жүйесіне жалғайды. Бұл SAN әлемі: дискілер серверде емес, бөлек сақтау жүйесінде тұрады, ал сервер оларды желі арқылы көреді. Сондықтан алдымен өзіңізден сұраңыз: бізде FC инфрақұрылымы бар ма? Коммутатор да, FC сақтау жүйесі де жоқ болса, FC адаптер алудың мағынасы шамалы.
Жылдамдық және буын
SAS үшін қазір кең тараған стандарт 12 Гбит/с. Ескі 6 Гбит/с дискілер мен себеттер мұндай адаптерге әдетте қосыла береді, тек сол буында жылдамдық баяу жақтың деңгейінде болады.
Fibre Channel буындары жылдамдығымен аталады: 8, 16, 32 Гбит/с. 32 Гбит/с адаптерлердің көбі 16 және 8 Гбит/с желімен де жұмыс істей алады, жылдамдықты өзі анықтайды. Ескі коммутаторы бар желіге жаңа сервер қосқанда бұл өте ыңғайлы: адаптерді қазір алып, кейін коммутаторды жаңартқанда толық жылдамдыққа шығасыз. Бір нәрсені ұмытпаңыз: байланыс ең баяу буынның жылдамдығымен жүреді, яғни 16 Гбит/с коммутаторға қосылған 32 Гбит/с адаптер 16 Гбит/с-та жұмыс істейді. Ескі буынды қолдау әр модельде әртүрлі, ең төменгі жылдамдықты құжаттан қараңыз.
Порт саны
FC әлемінде екі порт ең жиі кездесетін нұсқа, оның себебі де бар. Әр портты бөлек коммутаторға қосып, екі тәуелсіз жол жасауға болады. Бір коммутатор, бір кабель немесе бір порт істен шықса, сервер сақтау жүйесін екінші жол арқылы көре береді. Ол үшін операциялық жүйеде multipath баптауы керек, мұны да алдын ала жоспарлаңыз.
Төрт портты адаптер сервер бірнеше сақтау жүйесіне қосылғанда немесе бір слоттан көбірек өткізу қабілеті керек болғанда ыңғайлы. Бірақ төрт порттың бәрі бір платада тұрғанын есте ұстаңыз: плата істен шықса, төртеуі бірге кетеді. Сондықтан аса маңызды серверлерге бір төрт портты адаптерден гөрі екі бөлек адаптер қою жиі сенімдірек.
SAS HBA-да порттан гөрі қанша құрылғы қосуға болатыны маңыздырақ. Тікелей қосқанда құрылғы саны адаптердің жолдар санымен шектеледі, ал SAS-экспандер арқылы бір адаптерге әлдеқайда көп диск жалғауға болады. Экспандер көбіне дисктік себеттің немесе полканың ішінде тұрады, сондықтан себеттің қандай екенін алдын ала біліп алыңыз.
Оптикалық модульдер: SFP+ және SFP28
FC адаптердің порттары көбіне оптикалық модуль салынатын ұя болып келеді. 16 Гбит/с адаптерлерде әдетте SFP+ форматы, 32 Гбит/с адаптерлерде SFP28 кездеседі. Модуль адаптермен бірге келе ме, жоқ па, сатып алмас бұрын нақтылаңыз. Модуль, адаптер және коммутатор бір-бірімен үйлесетінін де тексеріңіз: кейбір өндірушілер тек өз модульдерімен жұмыс істеуге рұқсат береді.
Оптика түрін де ескеріңіз. Қысқа қашықтыққа көбіне multimode, ұзын қашықтыққа single-mode қолданылады. Кабель мен модуль бір түрде болуы керек, әйтпесе байланыс жоқ немесе тұрақсыз болады.
PCIe шинасы және плата пішіні
Адаптер серверге PCI Express арқылы қосылады. Екі портты 32 Гбит/с FC адаптерлер әдетте PCIe 3.0 x8 қолданады. Мұндай платаны x16 слотқа да қоюға болады, ол қалыпты жұмыс істейді. Ал пішіні x8, бірақ электр жағынан x4 слотқа қойсаңыз, шина тар болып, адаптер толық жылдамдыққа шықпауы мүмкін. Сервердің құжатынан әр слоттың нақты жолдар санын қараңыз, кейде бір слоттың жұмысы екінші процессор орнатылған-орнатылмағанына байланысты болады.
Плата биіктігі де маңызды. 1U және көп 2U серверлерге Low Profile, яғни аласа плата керек. Көп адаптерлер екі түрлі бекіткіш планкамен келеді, бірақ бұл әр модельде әртүрлі, сондықтан кіші корпусқа алғанда жиынтықты алдын ала сұраңыз.
Кабель және коннектор
SAS HBA алғанда ең жиі ұмытылатын нәрсе кабель. Ішкі коннектор көбіне SFF-8643 (mini SAS HD) болады, ал дисктік себетте басқа коннектор тұруы мүмкін: сол SFF-8643, ескі SFF-8087 немесе дискіге тікелей баратын SAS/SATA. Кабельді себетке қарап таңдайсыз: бір ұшы адаптерге, екінші ұшы себетке сай келуі керек. Көп HBA кабельсіз келеді, оны бөлек алу керек.
FC жағында кабель оптикалық, ұшында көбіне LC коннектор болады. Ұзындығын алдын ала өлшеңіз: шкафта артық ұзын кабель жиналып, ауа ағынына кедергі жасайды, ал қысқа кабель керек жерге жетпей қалады.
Драйвер, микробағдарлама және үйлесімділік
Адаптер қанша жақсы болса да, ол операциялық жүйемен, гипервизормен және сақтау жүйесімен үйлесуі керек. Алдымен сақтау жүйесі өндірушісінің үйлесімділік тізімін қараңыз: SAN-да бұл техникалық қолдауға тікелей әсер етеді. Сосын пайдаланатын ОЖ немесе гипервизор нұсқасына драйвер бар-жоғын тексеріңіз.
SAS HBA-ны бағдарламалық массивке алсаңыз, микробағдарлама режиміне назар аударыңыз. Кейбір контроллерлер IR режимінде (қарапайым RAID) және IT режимінде (таза HBA) жұмыс істей алады. ZFS сияқты жүйелерге IT режимі керек.
Жаңа all-flash сақтау жүйесін жоспарлап отырсаңыз, NVMe over FC қолдауын сұраңыз. Ол кешігуді азайтады, бірақ сақтау жүйесі, коммутатор және ОЖ да оны қолдауы шарт, біреуі ғана қолдаса, пайдасы жоқ.
Жылу және салқындату
Серверлік адаптерлер біраз қызады және сервер желдеткіштерінің ауа ағынына сүйенеді, көбінде өз желдеткіші болмайды. Жұмыс температурасы құжатта жазылады, оны сервер ішіндегі нақты жағдаймен салыстырыңыз. Серверлік HBA-ны жұмыс станциясына немесе қарапайым корпусқа қойсаңыз, платаға қосымша ауа ағынын ойластырыңыз.
Таңдау алдындағы қысқа тізім
- Не қосасыз: ішкі дискілер ме, әлде SAN ба.
- Массивті кім басқарады: бағдарлама, контроллер немесе сақтау жүйесі.
- Желі немесе себет қай жылдамдықта жұмыс істейді.
- Қанша порт керек және резервтік жол жасайсыз ба.
- Серверде қандай слот бос және плата биіктігі қандай болуы керек.
- Қандай кабель мен модуль керек, олар жиынтықта бар ма.
- ОЖ мен сақтау жүйесінің үйлесімділік тізімінде модель бар ма.
Жиі кездесетін қателер
- Ішкі дискілерге FC адаптер алу. Fibre Channel HBA дискілерді тікелей қоспайды, ол SAN желісіне арналған. Серверге ішкі дискілер қосу керек болса, SAS HBA немесе RAID-контроллер іздеңіз.
- HBA-дан RAID күту. Таза HBA массив жинамайды. Аппараттық RAID керек болса, басқа құрылғы керек, ал бағдарламалық массив жоспарласаңыз, HBA дәл керегі.
- Кабельді ұмыту. Адаптер келеді, ал оны себетке қосатын кабель жоқ. Коннектор түрін адаптерден де, себеттен де алдын ала қараңыз.
- Модульдерді ескермеу. FC адаптер порттарына модуль керек, ал модуль коммутатормен үйлесуі керек. Модульсіз адаптер желіге қосылмайды.
- Слотты тексермеу. Плата биіктігі сай келмейді немесе слот электр жағынан тар болып шығады. Сервер құжатын бір қарап шығу көп уақытты үнемдейді.
- Бір жолға сену. Маңызды серверді SAN-ға бір ғана порт арқылы қосу. Бір кабель шыққанда бүкіл сервис тоқтап қалуы мүмкін, ал екі порт пен екі коммутатор бұл қаупін азайтады.
- Үйлесімділік тізімін қарамау. Адаптер жұмыс істеп тұрғандай көрінеді, бірақ сақтау жүйесінің өндірушісі оны қолдамайды, ақау шыққанда көмек алу қиындайды.
- Жылдамдықты тек адаптерден бағалау. 32 Гбит/с адаптер ескі коммутаторда сол коммутатордың жылдамдығымен жұмыс істейді. Жылдамдық бүкіл тізбекке байланысты.
Қазір бізде не бар
Екі портты 32 Гбит/с Fibre Channel адаптерлерден үш нұсқа бар. Broadcom Emulex LPE32002-M2 Broadcom XE501 чипінде жасалған, 32, 16 және 8 Гбит/с FC жылдамдығын өзі анықтайды, PCI Express 3.0 x8 арқылы қосылады, екі оптикалық порты бар, жұмыс температурасы 0-ден 55 °C-қа дейін. Emulex LPe32002 тағы бір нұсқасы Gen 6 буынындағы екі портты FC HBA, кешігуі төмен, IOPS жоғары, NVMe over FC қолдайды. Бұл RAID-контроллер емес, серверді SAN-ға қосуға арналған адаптер. HPE StoreFabric SN1600E (Q0L12A) да екі портты, әр портқа 32 Гбит/с береді, 16 және 8 Гбит/с инфрақұрылыммен үйлесімді, интерфейсі PCI Express 3.0 x8, пішіні Low Profile.



Көп порт керек болса, Huawei-дің төрт портты екі адаптері бар: ODK-SIO4*16FC-ML 16 Гбит/с FC, порттары SFP+, және ODK-SIO4*32FC-ML 32 Гбит/с FC, порттары SFP28. Екеуі де серверлер мен сақтау жүйелерін Fibre Channel желісіне қосуға арналған.
Дискілерді серверге тікелей қосу үшін Supermicro AOC-S3008L-L8E бар. Бұл LSI3008 чипіндегі SAS HBA, жылдамдығы 12 Гб/с, тікелей қосқанда 8 құрылғыға дейін, SAS-экспандер арқылы 122 құрылғыға дейін жалғайды. SFF-8643 (mini SAS HD) кабелі бөлек алынады, мұны ескеріңіз.



Көбірек нұсқа — HBA-адаптеры и контроллеры хранения данных бөлімінде.
Сұрақтар мен жауаптар
HBA мен RAID-контроллердің айырмашылығы неде?
HBA дискілерді немесе сақтау желісін серверге жай ғана жалғайды да, әр дискіні операциялық жүйеге сол күйінде береді. RAID-контроллер дискілерді массивке өзі біріктіреді. Бағдарламалық сақтау жүйелеріне және SAN-ға HBA керек, аппараттық массивке RAID-контроллер керек.
Fibre Channel адаптерге ішкі дискілерді қосуға бола ма?
Жоқ. FC HBA серверді коммутаторға немесе сыртқы сақтау жүйесіне жалғауға арналған. Сервер ішіндегі дискілерге SAS HBA немесе RAID-контроллер керек.
32 Гбит/с адаптер 16 Гбит/с коммутатормен жұмыс істей ме?
Көп модельдер ескі буынды қолдайды, мысалы, бізде бар екі портты 32 Гбит/с адаптерлер 16 және 8 Гбит/с желімен де үйлеседі. Бұл жағдайда байланыс коммутатордың жылдамдығымен жүреді. Нақты модельдің ең төменгі жылдамдығын құжаттан тексеріңіз.
Екі портты алған дұрыс па, төрт портты ма?
Көп серверге екі порт жетеді: әр портты бөлек коммутаторға қосып, резервтік жол жасайсыз. Төрт порт бірнеше сақтау жүйесіне қосылғанда немесе бір слоттан көп өткізу қабілеті керек болғанда пайдалы. Аса маңызды жүйелерге екі бөлек адаптер сенімдірек.
x8 адаптерді x16 слотқа қоюға бола ма?
Иә, PCIe кері үйлесімді, x8 плата x16 слотта қалыпты жұмыс істейді. Тек слот электр жағынан тар болмасын және плата биіктігі корпусқа сай келсін.
Кабель мен модуль адаптермен бірге келе ме?
Әр модельде әртүрлі. Мысалы, Supermicro AOC-S3008L-L8E үшін SFF-8643 кабелі бөлек алынады. FC адаптерлердің жиынтығында модуль бар-жоғын алдын ала сұрап алыңыз.


