Представим кластер SQL Server на четырех серверах: хранение по iSCSI и офисный трафик используют одну сеть 10 GbE. При росте нагрузки они начинают конкурировать за полосу. Выделенная Ethernet-сеть или SAN на FC снимает эту конкуренцию. Fibre Channel коммутатор выбирают, если FC поддерживает СХД и его преимущества оправдывают стоимость отдельной фабрики. Ниже разберем расчет портов, совместимость и состав закупки.
Что такое FC-коммутатор и зачем нужен в инфраструктуре
Fibre Channel обеспечивает передачу данных хранения через собственную фабрику. WWN (World Wide Name) идентифицирует устройство или порт, а FCID служит адресом порта внутри фабрики. Ethernet и TCP/IP для обычного FC-соединения не нужны.
FC-коммутатор объединяет HBA (Host Bus Adapter, адаптеры подключения серверов) с портами СХД и обеспечивает зонирование. Кредитное управление потоком ограничивает переполнение приемных буферов, но не гарантирует доставку при любых ошибках. Задержка зависит от модели, размера кадра, числа переходов и нагрузки. Полную задержку I/O измеряют вместе с HBA, линиями и СХД.
iSCSI можно развернуть на выделенной Ethernet-сети. Конкуренция с офисным трафиком возникает при общей инфраструктуре и недостаточном резерве полосы. Поэтому сравнивают проект целиком: совместимость хранилища, стоимость портов, обслуживание и результаты нагрузочного теста.
Коммутатор нужен, когда прямого подключения портов серверов к СХД недостаточно для выбранной топологии. Эксплуатация требует навыков работы с WWPN-зонами, межкоммутаторными соединениями ISL (Inter-Switch Link) и кредитами буферов. Обучение и поддержку включают в TCO, совокупную стоимость владения.
Когда FC-коммутатор оправдан
Критичные нагрузки и регуляторные требования
В критичных системах SAN-фабрику проектируют по SLA, модели угроз и требованиям конкретного объекта. Само назначение организации не делает FC обязательным. Выбор обосновывают совместимостью СХД, изоляцией трафика и испытаниями пикового профиля, включая переключение при отказе.
FC использует buffer credits для управления потоком. Медленный приемник может вызвать перегрузку. В Ethernet механизмы DCB (Data Center Bridging) и PFC (Priority Flow Control) тоже требуют настройки. Для OLTP измеряют p99 времени операций.
Гетерогенные среды и крупные кластеры
В гетерогенной среде проверяют матрицы совместимости HBA, СХД и коммутатора, включая драйверы и прошивки. FC-коммутатор 16G остается вариантом для существующей фабрики с такими портами. Наличие 16G у СХД определяют по комплектации, а не году выпуска. Большое число серверов само по себе не делает FC предпочтительным.
Для небольшой среды сравните iSCSI и NFS по поддержке, отказоустойчивости и компетенциям команды. Стоимость миграции действующей FC-СХД учитывают отдельно.
Параметры выбора FC-коммутатора
Спецификация собирается из семи параметров, каждый влияет на стоимость и ресурс масштабирования.
- Поколение и скорость. Для FC-коммутатора 16G в существующей SAN проверьте сроки поддержки. Для новой закупки сравните доступные 32G, 64G и более новые модели. Скорости соединения определяют оба порта и оптика: совместимость вниз подтверждают по матрице конкретного оборудования.
- Число портов. Для каждой фабрики сложите HBA, порты СХД, ISL и резерв. Пример для A: 12 серверов + 4 порта СХД + 2 ISL + 6 резервных = 24 порта. Повторите расчет для B и проверьте активацию портов.
- Топология. Для критичной нагрузки проектируют независимые фабрики A и B. Для крупной SAN оценивают топологию core-edge, число переходов и резервные ISL.
- Производительность. Проверьте полосу портов и ISL, переподписку и распределение buffer credits. Для длинных соединений расчет кредитов зависит от скорости, расстояния и размера кадров. Проверка под нагрузкой должна выявить медленные приемники и влияние отказа одного ISL.
- Лицензирование портов. Сверьте активные порты базовой комплектации, пакеты расширения Ports-on-Demand и лицензии нужных функций. Названия и правила пакетов зависят от модели. В TCO учитывают также сроки поддержки, обновления ПО и ограничения поставки.
- Расширенные функции. Агрегация ISL увеличивает доступную полосу при поддержке выбранными моделями. Zoning на FC-коммутаторе ограничивает связь портов, но не заменяет доступ к LUN на СХД. Проверьте совместимость версий Brocade FOS или Cisco MDS NX-OS и условия обновления без нарушения сервиса.
- Трансиверы. Выбирайте их по матрице совместимости коммутатора: скорости, длине волны, типу волокна, разъему и дальности. Форм-фактор не задает скорость сам по себе. Например, Brocade G720 использует 64G SFP+ и двухканальные SFP-DD. Согласуйте оба конца линии и допустимые потери оптического тракта.
Оборудование Fibre Channel подбирают вместе с СХД. В спецификации должны быть совместимые коммутаторы, лицензии и оптика для обоих концов каждой линии.
Архитектура фабрики и эксплуатация
Dual-fabric и зонирование
Dual-fabric означает две независимые SAN-фабрики A и B. Сервер и СХД имеют пути в обе. MPIO (Multipath I/O) направляет ввод-вывод по доступному пути. Время переключения и влияние на приложение зависят от драйвера HBA, тайм-аутов и параметров СХД. Перед вводом в эксплуатацию проверяют отключение каждого пути и восстановление доступа.
Зонирование определяет, какие порты SAN-фабрики могут взаимодействовать. В single-initiator single-target zone включают WWPN одного порта HBA и одного target-порта СХД. Доступ к конкретным LUN дополнительно ограничивают средствами хранилища. Изменение zoning на FC-коммутаторе проверяют на тестовом инициаторе и сохраняют план отката до применения в рабочей среде.
Контролируйте журналы RAS (Reliability, Availability, Serviceability: надежность, доступность и обслуживание), ошибки CRC (Cyclic Redundancy Check: контроль целостности кадров), состояние ISL и дефицит кредитов. SAN-аналитика помогает сопоставить ошибки порта с нагрузкой. Для выбранного ПО проверяют поддержку моделей и версий.
Для удаленной площадки проверьте оптический бюджет и совместимость транспортного оборудования. Смету разделите по фабрикам и покажите зависимости компонентов.
Типичные ошибки выбора и эксплуатации
- Единственный коммутатор. Его отказ может лишить серверы доступа к СХД. Отказоустойчивость подтверждают независимыми путями и испытанием переключения.
- Недооценка лицензий портов. Устройство на 48 портов может поставляться с 24 активированными. Запросите цену нужного пакета расширения и подтвердите, что его можно приобрести и активировать в условиях проекта.
- Неверный расчет ISL. HBA 16G подключается на скорости 16G и не снижает независимо работающий ISL 32G. Однако межкоммутаторная линия может стать узким местом при суммарном трафике многих устройств. Проверяйте ее загрузку и режим после отказа соседнего соединения.
- Открытое зонирование. Конфигурация, где все устройства видят все - риск случайного доступа к чужим LUN и уязвимость при любом инциденте.
- Игнорирование мониторинга. Контролируйте ошибки CRC, дефицит кредитов и состояние ISL. Сопоставляйте события с загрузкой, чтобы обнаружить проблему до нарушения SLA.
- Сторонняя оптика. Проверьте совместимость и условия поддержки. Неподдерживаемый модуль может не определиться или работать с ограничениями.
- Отсутствие запасных модулей. Состав ЗИП и сроки доставки согласуйте с допустимым временем восстановления фабрики.
- Несогласованная оптика. SWL и LWL обозначают коротковолновую и длинноволновую оптику. Скорость, длину волны, волокно и оптический бюджет проверяют для обоих концов соединения.
На что смотреть в КП интегратора
В КП должны быть схема A/B, расчет подключений и число активированных портов. Укажите артикулы коммутаторов, оптики, лицензий и запасных частей.
Отдельно запросите стоимость расширения, поддержки и обновления ПО. Закрепите инструмент мониторинга, периодичность аудита зон и ответственных.
Согласуйте гарантию, сроки поставки и обучение инженеров. Если обслуживание передано подрядчику, определите время реакции и порядок восстановления.
Как выбрать FC-коммутатор: семь шагов
- Подтвердите необходимость FC по совместимости СХД, изоляции и измеренной нагрузке.
- Рассчитайте порты каждой фабрики с ISL и резервом.
- Выберите скорость по HBA, СХД и совместимости оптики.
- Спроектируйте независимые фабрики A и B и раздельные трассы.
- Уточните лицензии портов, функций, сроки и условия поддержки.
- Запланируйте обучение инженеров или управляемое обслуживание.
- Закрепите мониторинг и аудит зон, проверьте переключение путей под нагрузкой.
Для подбора сетевого оборудования передайте число HBA и портов СХД, схему A/B и требования к ISL, оптике, лицензиям и поддержке. Уточните поставку, гарантию, доступность ЗИП и порядок замены.