La importancia de la red en la era de la IA y las direcciones de innovación
Con la rápida expansión de la escala de los grandes modelos, la red se ha convertido en un elemento clave de la era de la IA. Este artículo explorará el origen de la demanda de red, la evolución de los protocolos de comunicación y las direcciones de innovación en el hardware de red.
Origen de la demanda de red
La diferencia entre el volumen del modelo y el límite de una sola tarjeta se amplía, lo que requiere una solución de agrupación de múltiples servidores para resolver el problema de entrenamiento.
La red se utiliza para sincronizar los parámetros del modelo entre las tarjetas gráficas, lo que plantea mayores requisitos para la densidad y la capacidad de la red.
El tiempo de entrenamiento está estrechamente relacionado con la velocidad de cálculo, y se mejora la potencia de cálculo mediante la expansión del número de dispositivos y la eficiencia paralela.
La sincronización de múltiples tarjetas requiere operaciones de alineación de parámetros frecuentes, lo que plantea mayores exigencias para la transmisión de datos en la red.
Las interrupciones en el entrenamiento pueden causar grandes pérdidas, y los costos de fallos en la red son elevados.
La evolución de los protocolos de comunicación
Protocolo de comunicación dentro del nodo: PCIe, NVLink, Infinity Fabric, etc., son barreras fundamentales para los fabricantes.
Protocolo de comunicación entre nodos: familia de protocolos InfiniBand y Ethernet RoCE, que soporta la funcionalidad RDMA.
La competencia entre el protocolo IB y el protocolo RoCE refleja la lucha por el poder de influencia entre los fabricantes de GPU.
La creación de la Alianza de Hyperledger está destinada a construir un protocolo de red abierto, flexible y de alto rendimiento.
Direcciones innovadoras en hardware de red
Medio de transmisión: competencia entre luz, cobre y silicio, a corto plazo los cables de cobre aún tienen ventaja, a largo plazo la tendencia de que la luz avance y el cobre retroceda sigue siendo la misma.
Innovación en módulos ópticos: tecnologías LPO/LRO, fotónica de silicio, y películas delgadas de niobato de litio, entre otras, reducen costos.
Conmutador: Surge el conmutador óptico, los chips de conmutación eléctrica continúan innovando.
Arquitectura de red: evolución de la arquitectura de hoja a nuevas arquitecturas como Dragonfly, Rail-only, etc.
Clúster de centros de datos: Explorar soluciones de interconexión de potencia informática entre centros de datos.
Sugerencias de inversión
Prestar atención a los elementos clave del sistema de comunicaciones: Zhongji Xuchuang, New Yi Sheng, Tianfu Communication, HuDian Co., etc.
Seguimiento de los segmentos de innovación: Yangtze Optical Fibre, Zhongtian Technology, Hengtong Optic-electric, Shengke Communication, etc.
Prestar atención a las oportunidades industriales que traen las nuevas tecnologías, como cables de cobre, fibra óptica especial, conmutadores nacionales, etc.
Esta página puede contener contenido de terceros, que se proporciona únicamente con fines informativos (sin garantías ni declaraciones) y no debe considerarse como un respaldo por parte de Gate a las opiniones expresadas ni como asesoramiento financiero o profesional. Consulte el Descargo de responsabilidad para obtener más detalles.
7 me gusta
Recompensa
7
7
Compartir
Comentar
0/400
gaslight_gasfeez
· hace4h
La competencia en inteligencia artificial es realmente intensa.
Ver originalesResponder0
LongTermDreamer
· hace11h
Espera tres años más, ganarás mucho.
Ver originalesResponder0
CoinBasedThinking
· hace11h
La infraestructura no da abasto, todo es un desastre.
Ver originalesResponder0
FloorPriceWatcher
· hace11h
¿No es solo quemar dinero para aumentar el volumen?
Ver originalesResponder0
MetaLord420
· hace11h
Ah, otra vez hay que hacer distribución.
Ver originalesResponder0
AirdropChaser
· hace11h
¿Quién considera invertir cuando ya hay grandes modelos?
Ver originalesResponder0
MetaverseVagrant
· hace11h
Ah, no hables de IA si la red no puede seguir el ritmo.
Oportunidades y desafíos de la innovación en la red en la era de la IA
La importancia de la red en la era de la IA y las direcciones de innovación
Con la rápida expansión de la escala de los grandes modelos, la red se ha convertido en un elemento clave de la era de la IA. Este artículo explorará el origen de la demanda de red, la evolución de los protocolos de comunicación y las direcciones de innovación en el hardware de red.
Origen de la demanda de red
La diferencia entre el volumen del modelo y el límite de una sola tarjeta se amplía, lo que requiere una solución de agrupación de múltiples servidores para resolver el problema de entrenamiento.
La red se utiliza para sincronizar los parámetros del modelo entre las tarjetas gráficas, lo que plantea mayores requisitos para la densidad y la capacidad de la red.
El tiempo de entrenamiento está estrechamente relacionado con la velocidad de cálculo, y se mejora la potencia de cálculo mediante la expansión del número de dispositivos y la eficiencia paralela.
La sincronización de múltiples tarjetas requiere operaciones de alineación de parámetros frecuentes, lo que plantea mayores exigencias para la transmisión de datos en la red.
Las interrupciones en el entrenamiento pueden causar grandes pérdidas, y los costos de fallos en la red son elevados.
La evolución de los protocolos de comunicación
Protocolo de comunicación dentro del nodo: PCIe, NVLink, Infinity Fabric, etc., son barreras fundamentales para los fabricantes.
Protocolo de comunicación entre nodos: familia de protocolos InfiniBand y Ethernet RoCE, que soporta la funcionalidad RDMA.
La competencia entre el protocolo IB y el protocolo RoCE refleja la lucha por el poder de influencia entre los fabricantes de GPU.
La creación de la Alianza de Hyperledger está destinada a construir un protocolo de red abierto, flexible y de alto rendimiento.
Direcciones innovadoras en hardware de red
Medio de transmisión: competencia entre luz, cobre y silicio, a corto plazo los cables de cobre aún tienen ventaja, a largo plazo la tendencia de que la luz avance y el cobre retroceda sigue siendo la misma.
Innovación en módulos ópticos: tecnologías LPO/LRO, fotónica de silicio, y películas delgadas de niobato de litio, entre otras, reducen costos.
Conmutador: Surge el conmutador óptico, los chips de conmutación eléctrica continúan innovando.
Arquitectura de red: evolución de la arquitectura de hoja a nuevas arquitecturas como Dragonfly, Rail-only, etc.
Clúster de centros de datos: Explorar soluciones de interconexión de potencia informática entre centros de datos.
Sugerencias de inversión
Prestar atención a los elementos clave del sistema de comunicaciones: Zhongji Xuchuang, New Yi Sheng, Tianfu Communication, HuDian Co., etc.
Seguimiento de los segmentos de innovación: Yangtze Optical Fibre, Zhongtian Technology, Hengtong Optic-electric, Shengke Communication, etc.
Prestar atención a las oportunidades industriales que traen las nuevas tecnologías, como cables de cobre, fibra óptica especial, conmutadores nacionales, etc.