NFV (Network Functions Virtualization, виртуализация сетевых функций) - подход, при котором маршрутизатор, межсетевой экран, балансировщик нагрузки и другие сетевые устройства работают как программы на обычных серверах x86 вместо отдельных специализированных коробок. Программу, которая заменяет такое устройство, называют VNF - виртуальной сетевой функцией.
Идею сформулировали сами операторы связи: в октябре 2012 года группа крупных телеком-операторов опубликовала документ о виртуализации сетевых функций, и под ним в европейском институте стандартов ETSI создали рабочую группу NFV ISG. Её спецификации до сих пор служат общим языком для вендоров и операторов. Ниже разберём, как устроена NFV, чем она отличается от SDN, что нужно от сервера и где виртуальные сетевые функции пригодятся обычной компании.
Раньше под каждую сетевую задачу покупали отдельное устройство: маршрутизатор на границе сети, межсетевой экран, VPN-шлюз, балансировщик перед веб-серверами. У каждого свой процессор, своя прошивка, свой контракт поддержки и своё место в стойке. В NFV эти функции становятся виртуальными машинами или контейнерами и запускаются на общих серверах рядом друг с другом.
| Было устройство | Стало VNF | Примеры ПО |
|---|---|---|
| Пограничный маршрутизатор | Виртуальный маршрутизатор (vRouter) | VyOS, MikroTik CHR, Cisco Catalyst 8000V |
| Межсетевой экран | Виртуальный межсетевой экран (vFirewall) | OPNsense, pfSense, виртуальные версии коммерческих NGFW |
| Балансировщик нагрузки | Программный балансировщик | HAProxy, NGINX |
| VPN-концентратор | Виртуальный VPN-шлюз | WireGuard, strongSwan, OpenVPN |
| BRAS у интернет-провайдера | Виртуальный BNG (vBNG) | Коммерческие решения вендоров, сборки на DPDK |
| Оборудование ядра мобильной сети | Сетевые функции ядра 4G/5G | Решения телеком-вендоров, open-source проекты для стендов |
Что это даёт. Новую функцию запускают за минуты вместо недель на закупку и монтаж. Под нагрузку добавляют ещё один экземпляр VNF на свободном сервере. Железо одинаковое, поэтому запасные части, мониторинг и обслуживание общие. Платить за это приходится производительностью и сложностью: пакеты обрабатывает процессор общего назначения, а за десятками функций нужно следить.
В модели ETSI три уровня.
VNF - сами виртуальные сетевые функции: маршрутизатор, межсетевой экран, балансировщик. Каждая работает в своей ВМ или контейнере, её можно запустить, остановить, обновить и размножить независимо от остальных.
NFVI (NFV Infrastructure) - инфраструктура, на которой работают VNF: серверы, хранилище, физическая сеть и слой виртуализации над ними, обычно KVM.
MANO (Management and Orchestration) - управление и оркестрация. MANO состоит из трёх частей:
| Блок | За что отвечает | Чем реализуют |
|---|---|---|
| VIM (Virtualized Infrastructure Manager) | Выделяет ресурсы NFVI: процессоры, память, сети, диски под ВМ | Чаще всего OpenStack, для контейнеров - Kubernetes |
| VNFM (VNF Manager) | Жизненный цикл отдельных VNF: развёртывание, масштабирование, обновление, восстановление | Менеджеры от вендоров VNF или общий универсальный |
| NFVO (NFV Orchestrator) | Собирает из VNF сетевые сервисы целиком и координирует VIM и VNFM | ETSI OSM, коммерческие оркестраторы |
Эталонная открытая реализация MANO - проект ETSI Open Source MANO (OSM), он выпускает две версии в год. В небольших инсталляциях полного стека MANO обычно нет: роль VIM играет Proxmox VE или vCenter, а остальное делают скрипты и Ansible.
NFV и SDN часто упоминают вместе, но задачи у них свои. NFV отвечает на вопрос «на чём работают сетевые функции» и переносит их с отдельных устройств на серверы. SDN (Software-Defined Networking, программно-определяемая сеть) отвечает на вопрос «как управлять сетью»: решения о том, куда отправлять трафик, принимает центральный контроллер, а коммутаторы и виртуальные коммутаторы только выполняют его правила.
Друг без друга они работают, но вместе удобнее: VNF живут на серверах благодаря NFV, а SDN-контроллер строит между ними виртуальные сети и прокладывает трафик через нужные функции. Как такие виртуальные сети строятся поверх физической, мы разбирали в серии статей о том, как виртуализировать сеть, а пример SDN-платформы с контроллером - в руководстве по VXLAN и VMware NSX.
Специализированный маршрутизатор обрабатывает пакеты на собственных чипах. В виртуальной функции пакет проходит длинный путь: сетевая карта, ядро хоста, виртуальный коммутатор, виртуальная сетевая карта ВМ, ядро гостевой системы и только потом программа. На каждом шаге копирование и прерывания, поэтому стандартная связка «ядро Linux + виртуальный коммутатор» начинает задыхаться на коротких пакетах уже на скоростях около 10 Гбит/с.
Эту проблему решают несколькими способами, и в нагруженных VNF их обычно комбинируют.
DPDK (Data Plane Development Kit) - библиотеки, которые забирают сетевую карту у ядра и отдают её программе напрямую. Программа сама опрашивает карту в цикле, без прерываний и лишних копирований. На DPDK построены OVS-DPDK (ускоренный виртуальный коммутатор), VPP и многие коммерческие VNF. Цена - выделенные ядра процессора: они крутятся на 100% даже без трафика.
SR-IOV - функция сетевой карты, которая делит один физический порт на десятки виртуальных функций (VF). Каждую VF отдают своей ВМ, и трафик идёт из карты прямо в ВМ, минуя виртуальный коммутатор хоста. Так пакеты доходят быстрее всего, но такую ВМ сложнее переносить между хостами на ходу, а правила фильтрации между ВМ приходится настраивать на самой карте или выше по сети. Как выбрать карту под виртуализацию и что ещё она умеет разгружать, мы писали в статье про сетевые карты и виртуализацию.
Hugepages, привязка к ядрам и NUMA. VNF выдают память крупными страницами (2 МБ или 1 ГБ), чтобы процессор реже промахивался мимо кэша трансляции адресов. Ядра закрепляют за функцией, а саму функцию держат на том процессоре, к которому подключена её сетевая карта: если пакеты ходят между сокетами, теряется заметная часть производительности.
Часть этой работы можно снять с процессора совсем и отдать сетевой карте - так работают сопроцессоры обработки данных (DPU). На них выносят виртуальный коммутатор, шифрование и хранилище, а ядра сервера остаются под сами VNF.
Под NFV подходит обычный двухпроцессорный или однопроцессорный сервер, но подбирать его начинают с сети, диски тут вторичны. На что смотреть:
Диски у NFV-сервера обычно скромные: зеркало из двух SSD под систему и образы ВМ. Исключение - функции, которые пишут много логов или хранят журналы трансляций адресов, как у интернет-провайдеров. Какие роли бывают у серверов оператора связи и что под них подбирать, мы разбирали в статье про серверы для операторов связи.
Трафик редко проходит через одну функцию. Обычная цепочка - межсетевой экран, затем система обнаружения вторжений, затем балансировщик, и только потом серверы приложений. В физической сети такую цепочку собирают кабелями и статической маршрутизацией, и любое изменение означает перекоммутацию.
Service Function Chaining (SFC) задаёт цепочку программно: оркестратор или SDN-контроллер описывает, через какие VNF и в каком порядке идёт каждый тип трафика. Гостевой Wi-Fi можно пустить через фильтр контента, а трафик бухгалтерии - через отдельный межсетевой экран, не трогая провода. Сложность растёт вместе с числом цепочек, поэтому их держат в виде кода и прогоняют на стенде до запуска в работу.
Полный стек NFV с оркестратором нужен операторам связи и крупным сетям. Но сама идея работает и в офисе на 50-200 человек: маршрутизатор и межсетевой экран можно запустить виртуальной машиной в Proxmox или Hyper-V на уже имеющемся сервере.
Типичные варианты:
Когда это оправдано: функций несколько (маршрутизация, VPN между филиалами, фильтрация), сервер виртуализации уже есть и в нём остались свободные ядра, а в штате есть человек, который будет это сопровождать. Внешний канал лучше подключить к отдельному сетевому порту, проброшенному в ВМ, чтобы интернет не проходил через общий мост хоста.
Когда лучше аппаратный шлюз: сервер один, и его перезагрузка при обновлении оставит весь офис без интернета; требования к скорости простые; сопровождать виртуальный маршрутизатор некому. Компромисс - две ВМ с межсетевым экраном на двух хостах в паре через CARP или VRRP: один хост уходит на обслуживание, второй подхватывает адрес шлюза за секунды.
Первые VNF были виртуальными машинами, и ими управляли через OpenStack. Сейчас всё больше функций выпускают в контейнерах: такие функции называют CNF (Cloud-native Network Functions) и запускают в Kubernetes. Ядро сетей 5G операторы строят в основном именно так, функция за функцией в отдельных контейнерах. ETSI дописал в свои спецификации управление контейнерными кластерами, но Kubernetes и классическая модель MANO совпадают не один к одному, и большинство операторов живут со смешанной схемой.
Вторая линия - вынос функций ближе к пользователю: на узлы связи, базовые станции, в филиалы. Там ставят компактные серверы, на которых крутится набор VNF вместо нескольких устройств. Какие требования к таким узлам (работа без кондиционированного зала, удалённое управление, короткий корпус), мы разбирали в статье про edge-серверы для периферийных вычислений.
NFV добавляет к сети новые цели для атаки. Взлом гипервизора или оркестратора даёт доступ сразу ко всем функциям на хосте, включая межсетевой экран, который должен был защищать остальную сеть. Поэтому интерфейсы управления хостами, VIM и оркестратором выносят в отдельную сеть, доступ к ним дают по ключам и с журналированием, а сами хосты обновляют так же регулярно, как прошивки обычных маршрутизаторов.
Обратная сторона - защиту стало проще дробить. Между VNF и группами ВМ ставят фильтры на уровне виртуального коммутатора (микросегментация), и заражённая машина не видит соседей, даже если они в одной подсети.
Экономия от NFV складывается из трёх частей. Железо унифицировано: вместо пяти устройств с отдельными контрактами поддержки - несколько одинаковых серверов. Новые сервисы запускаются за дни вместо месяцев. Мощность можно перераспределять между функциями без закупки.
Против этого стоит несколько статей расходов, о которых в презентациях вендоров вспоминают реже:
Для оператора связи, у которого десятки однотипных функций и регулярно появляются новые сервисы, NFV почти всегда выгоднее. Для офиса с одним каналом и простыми требованиями хороший аппаратный маршрутизатор обычно дешевле и проще. Между ними - компании с филиалами и несколькими каналами: там виртуальный маршрутизатор и межсетевой экран на паре серверов окупаются, если серверы виртуализации уже есть.
Это когда маршрутизатор, межсетевой экран и другие сетевые устройства заменяют программами, которые работают в виртуальных машинах или контейнерах на обычных серверах. Сетевую функцию можно запустить, перенести или размножить без закупки нового железа.
NFV переносит сетевые функции с отдельных устройств на серверы. SDN выносит управление сетью в центральный контроллер, который задаёт правила коммутаторам. Технологии независимы, но часто работают вместе: SDN прокладывает трафик через виртуальные функции.
VNF (Virtualized Network Function) - сетевая функция в виртуальной машине. CNF (Cloud-native Network Function) - та же функция, но в контейнерах под управлением Kubernetes. CNF быстрее запускаются и масштабируются, поэтому на них строят ядро сетей 5G.
Полный стек с оркестратором - нет. А виртуальный маршрутизатор или межсетевой экран на сервере виртуализации бывает удобен, если функций несколько, серверов минимум два и есть кому это сопровождать. При одном сервере и простых требованиях надёжнее аппаратный шлюз.
Подбираете сервер под виртуальные сетевые функции?
Поможем собрать сервер под NFV: посчитаем ядра под пакетную обработку и под остальные ВМ, подберём сетевые карты 10/25/100 Гбит/с с SR-IOV и поддержкой DPDK, разложим их по процессорам и предложим схему из двух узлов. Посмотрите серверные платформы Supermicro в каталоге или напишите нам: +7 (800) 551-80-12, info@ittelo.ru. Серверами мы занимаемся больше 11 лет и за это время накопили серьёзную экспертизу. Даём гарантию до 5 лет, берём сервер на постпродажное обслуживание и не пропадаем после отгрузки.