Высокоскоростная сеть Ангара
Сеть Ангара — отечественная сеть, сопоставимая по своей функциональности, производительности и надёжности с современными разработками мировых лидеров в данной области (Cray, IBM, Mellanox).
Сетевой адаптер представляет собой плату расширения PCI Express (аналогично сетевым адаптерам InfiniBand), к которой подключается до 6 (или до 8, с платой расширения) кабелей для соединения с соседними узлами. Поддерживаются топологии сети без коммутаторов: кольцо, 2D, 3D и 4D-тор (либо решётка); в общем случае передача данных между узлами может осуществляться через промежуточные узлы.
Основной режим программирования — совместное использование MPI, OpenMP и OpenSHMEM; также поддерживаются другие модели программирования, в том числе Charm++, GASNet, ARMCI, UPC. Для поддержки OpenSHMEM и PGAS-языков на каждом узле выделяется регион памяти, доступный для удалённых обращений (чтения, записи, атомарных операций) от других сетевых узлов. Сеть «Ангара» совместима с коммерчески доступными процессорами и материнскими платами.
СБИС сетевого адаптера (ЕС8430) была разработана в АО «НИЦЭВТ» и изготовлена на фабрике TSMC по технологии 65 нм. Плата сетевого адаптера изготавливается на собственном производстве в АО «НИЦЭВТ».
Ключевые особенности:
- топология сети: 4D-тор
- адаптер на базе СБИС
- разъёмы/кабели: SAMTEC HDLSP
- до 8 каналов связи с соседними узлами
- задержка на MPI ping-pong: 1 мкс
- задержка на хоп: 130 нс
- масштабирование до 32К узлов
- аппаратная поддержка односторонних операций (put, get, amo)
- аппаратная поддержка коллективных операций (broadcast, reduce)
- детерминированная и адаптивная маршрутизация
- протокол надёжной передачи по каналу связи
- маршрутизация с обходом отказавших узлов и каналов связи
- поддержка ОС на базе ядра Linux
- поддержка средств параллельного программирования: OpenSHMEM, MPI 3.0 (на базе MPICH), OpenMP, Charm++, GASNet, UPC
БИС адаптера (ЕС8430)
- технология TSMC 65 нм
- корпус FCBGA-1521, 40 х 40 мм
- энергопотребление 20 Вт
- размер кристалла 13,0 х 10,5 мм
- 96 Link + 16 PCIe SerDes
- интерфейс ELB
- более 180 млн транзисторов
Дополнительную информацию о сети Ангара вы можете получить на сайте angara.nicevt.ru