Важность и направления инноваций в сети в эпоху ИИ
С ростом масштаба больших моделей сеть стала ключевым элементом эпохи ИИ. В этой статье будут исследованы источники сетевого спроса, эволюция коммуникационных протоколов и направления инноваций в сетевом оборудовании.
Источник сетевых требований
Разница между объемом модели и лимитом на одну карту увеличивается, необходимо решение проблемы обучения с помощью многосерверного кластера.
Сеть используется для синхронизации параметров модели между видеокартами, что предъявляет более высокие требования к плотности и ёмкости сети.
Время тренировки тесно связано со скоростью вычислений, и увеличение количества устройств и параллельной эффективности может повысить вычислительную мощность.
Многокарточная синхронизация требует частых операций согласования параметров, что предъявляет более высокие требования к сетевой передаче.
Прерывание обучения может привести к огромным потерям, а стоимость сетевых сбоев высока.
Эволюция коммуникационных протоколов
Протоколы внутренней связи узлов: PCIe, NVLink, Infinity Fabric и т.д., являются ключевыми барьерами для производителей.
Протоколы связи между узлами: InfiniBand и семейство протоколов Ethernet RoCE, поддерживающие функцию RDMA.
Конкуренция между протоколом IB и протоколом RoCE отражает борьбу за влияние среди производителей GPU.
Создание Альянса Hyper Ethernet направлено на разработку открытого, гибкого и высокопроизводительного сетевого протокола.
Направления инноваций в сетевом оборудовании
Средства передачи: конкуренция между светом, медью и кремнием, в краткосрочной перспективе медные провода все еще имеют преимущество, в долгосрочной перспективе тренд свет вперед, медь назад остается неизменным.
Инновации в оптических модулях: технологии LPO/LRO, кремниевый свет, тонкие пленки ниобата лития и другие технологии снижают затраты.
Коммутатор: возникновение оптических коммутаторов, постоянные инновации в чипах электрических коммутаторов.
Сетевая архитектура: эволюция от архитектуры Leaf-Ridge к новым архитектурам, таким как Dragonfly, Rail-only и т.д.
Кластер центров обработки данных: исследование решений по взаимосвязанности вычислительных мощностей между центрами обработки данных.
Инвестиционные рекомендации
Обратите внимание на ключевые элементы системы связи: Zhongji Xuchuang, Xinyi Sheng, Tianfu Communication, Huadian Co. и др.
Отслеживание инновационных ссылок: YOFC, Zhongtian Technology, Hengtong Optoelectronics, Centec Communications и т. Д.
Обратите внимание на возможности, связанные с новыми технологиями, такими как медные кабели, специальные оптоволоконные кабели, отечественные коммутаторы и т.д.
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
7 Лайков
Награда
7
7
Поделиться
комментарий
0/400
gaslight_gasfeez
· 4ч назад
AI-топ действительно слишком конкурентен.
Посмотреть ОригиналОтветить0
LongTermDreamer
· 11ч назад
Подождите еще три года, чтобы заработать кучу денег.
Посмотреть ОригиналОтветить0
CoinBasedThinking
· 11ч назад
Инфраструктура не успевает, полный беспорядок.
Посмотреть ОригиналОтветить0
FloorPriceWatcher
· 11ч назад
Разве это не просто сжигание денег для увеличения объема?
Посмотреть ОригиналОтветить0
MetaLord420
· 11ч назад
Ах, снова нужно заниматься распределенной системой.
Посмотреть ОригиналОтветить0
AirdropChaser
· 11ч назад
Кто будет думать об инвестициях, когда все уже крупные модели?
Посмотреть ОригиналОтветить0
MetaverseVagrant
· 11ч назад
Ха, не говорите о ИИ, если интернет не справляется.
Возможности и вызовы сетевых инноваций в эпоху ИИ
Важность и направления инноваций в сети в эпоху ИИ
С ростом масштаба больших моделей сеть стала ключевым элементом эпохи ИИ. В этой статье будут исследованы источники сетевого спроса, эволюция коммуникационных протоколов и направления инноваций в сетевом оборудовании.
Источник сетевых требований
Разница между объемом модели и лимитом на одну карту увеличивается, необходимо решение проблемы обучения с помощью многосерверного кластера.
Сеть используется для синхронизации параметров модели между видеокартами, что предъявляет более высокие требования к плотности и ёмкости сети.
Время тренировки тесно связано со скоростью вычислений, и увеличение количества устройств и параллельной эффективности может повысить вычислительную мощность.
Многокарточная синхронизация требует частых операций согласования параметров, что предъявляет более высокие требования к сетевой передаче.
Прерывание обучения может привести к огромным потерям, а стоимость сетевых сбоев высока.
Эволюция коммуникационных протоколов
Протоколы внутренней связи узлов: PCIe, NVLink, Infinity Fabric и т.д., являются ключевыми барьерами для производителей.
Протоколы связи между узлами: InfiniBand и семейство протоколов Ethernet RoCE, поддерживающие функцию RDMA.
Конкуренция между протоколом IB и протоколом RoCE отражает борьбу за влияние среди производителей GPU.
Создание Альянса Hyper Ethernet направлено на разработку открытого, гибкого и высокопроизводительного сетевого протокола.
Направления инноваций в сетевом оборудовании
Средства передачи: конкуренция между светом, медью и кремнием, в краткосрочной перспективе медные провода все еще имеют преимущество, в долгосрочной перспективе тренд свет вперед, медь назад остается неизменным.
Инновации в оптических модулях: технологии LPO/LRO, кремниевый свет, тонкие пленки ниобата лития и другие технологии снижают затраты.
Коммутатор: возникновение оптических коммутаторов, постоянные инновации в чипах электрических коммутаторов.
Сетевая архитектура: эволюция от архитектуры Leaf-Ridge к новым архитектурам, таким как Dragonfly, Rail-only и т.д.
Кластер центров обработки данных: исследование решений по взаимосвязанности вычислительных мощностей между центрами обработки данных.
Инвестиционные рекомендации
Обратите внимание на ключевые элементы системы связи: Zhongji Xuchuang, Xinyi Sheng, Tianfu Communication, Huadian Co. и др.
Отслеживание инновационных ссылок: YOFC, Zhongtian Technology, Hengtong Optoelectronics, Centec Communications и т. Д.
Обратите внимание на возможности, связанные с новыми технологиями, такими как медные кабели, специальные оптоволоконные кабели, отечественные коммутаторы и т.д.