Высокоскоростная сеть Ангара

 Сеть Ангара — отечественная сеть, сопоставимая по своей функциональности, производительности и надёжности с современными разработками мировых лидеров в данной области (Cray, IBM, Mellanox).

Сетевой адаптер представляет собой плату расширения PCI Express (аналогично сетевым адаптерам InfiniBand), к которой подключается до 6 (или до 8, с платой расширения) кабелей для соединения с соседними узлами. Поддерживаются топологии сети без коммутаторов: кольцо, 2D, 3D и 4D-тор (либо решётка); в общем случае передача данных между узлами может осуществляться через промежуточные узлы.

Основной режим программирования — совместное использование MPI, OpenMP и OpenSHMEM; также поддерживаются другие модели программирования, в том числе Charm++, GASNet, ARMCI, UPC. Для поддержки OpenSHMEM и PGAS-языков на каждом узле выделяется регион памяти, доступный для удалённых обращений (чтения, записи, атомарных операций) от других сетевых узлов. Сеть «Ангара» совместима с коммерчески доступными процессорами и материнскими платами.

СБИС сетевого адаптера (ЕС8430) была разработана в АО «НИЦЭВТ» и изготовлена на фабрике TSMC по технологии 65 нм. Плата сетевого адаптера изготавливается на собственном производстве в АО «НИЦЭВТ».

Ключевые особенности:

  • топология сети: 4D-тор
  • адаптер на базе СБИС
  • разъёмы/кабели: SAMTEC HDLSP
  • до 8 каналов связи с соседними узлами
  • задержка на MPI ping-pong: 1 мкс
  • задержка на хоп: 130 нс
  • масштабирование до 32К узлов
  • аппаратная поддержка односторонних операций (put, get, amo)
  • аппаратная поддержка коллективных операций (broadcast, reduce)
  • детерминированная и адаптивная маршрутизация
  • протокол надёжной передачи по каналу связи
  • маршрутизация с обходом отказавших узлов и каналов связи
  • поддержка ОС на базе ядра Linux
  • поддержка средств параллельного программирования: OpenSHMEM, MPI 3.0 (на базе MPICH), OpenMP, Charm++, GASNet, UPC

БИС адаптера (ЕС8430)

  • технология TSMC 65 нм
  • корпус FCBGA-1521, 40 х 40 мм
  • энергопотребление 20 Вт
  • размер кристалла 13,0 х 10,5 мм
  • 96 Link + 16 PCIe SerDes
  • интерфейс ELB
  • более 180 млн транзисторов

Дополнительную информацию о сети Ангара вы можете получить на сайте angara.nicevt.ru