Un integrador de IA norteamericano encontró un bastidor que se enfriaba dos veces
El bastidor tenía suficiente capacidad de ventilador en teoría, pero el escape caliente regresaba a las entradas del servidor antes de que el circuito de control pudiera reaccionar.
Un integrador anónimo de infraestructura de IA de América del Norte estaba encargando un rack de alta densidad para cargas de trabajo de inferencia y almacenamiento. El bastidor utilizaba un flujo de aire de servidor de adelante hacia atrás, varios módulos de ventiladores extraíbles y un sistema de refrigeración a nivel de habitación diseñado en torno a una disposición de pasillo caliente y pasillo frío. La temperatura ambiente promedio parecía aceptable, sin embargo, los sensores de entrada superiores y dos zonas GPU se calentaron repetidamente más que el resto del bastidor.
La primera reacción fue generar comandos para los fanáticos del servidor. Eso redujo la temperatura brevemente, pero aumentó la salida acústica y la potencia auxiliar sin eliminar la causa. El equipo de puesta en marcha pidió a MEGA Tech que ayudara a separar tres efectos: presión insuficiente del ventilador, derivación de aire frío y recirculación de aire caliente. El nombre del cliente y los valores de la plataforma publicados son confidenciales; Este caso describe el método de muestra a validación.
La lección clave fue simple: un ventilador puede funcionar normalmente mientras el bastidor recibe el aire incorrecto. Un RPM superior no puede reparar una ruta de escape caliente que regresa a la entrada.
Lo que los ingenieros tuvieron que distinguir
La temperatura ambiente, la temperatura de escape del rack y la temperatura de entrada del servidor responden a diferentes preguntas.
La primera medición fue la temperatura de entrada del rack a varias alturas. Un sensor de una sola habitación no pudo revelar si la parte superior del bastidor estaba recibiendo aire recirculado más cálido. El equipo registró la temperatura de entrada, la temperatura de escape, el comando del ventilador, el ventilador RPM, la potencia y el estado de la carga de trabajo al mismo tiempo. Eso hizo posible ver si el ventilador respondía al calor o simplemente perseguía una entrada contaminada.
La segunda medición fue la dirección de la trayectoria aérea. La visualización del humo, los grifos de presión y las sondas de temperatura temporales se utilizaron únicamente como ayudas para la puesta en marcha; el registro de aceptación se basó en mediciones repetibles. El equipo revisó los extremos del bastidor, el espacio libre superior, los espacios en U no utilizados, las aberturas para cables, la región de la puerta trasera y la interfaz entre el chasis del servidor y la bandeja del ventilador.
La tercera medida fue la presión. El suministro de la sala, la contención, las aberturas de los racks y los módulos de ventiladores del servidor forman un sistema conectado. Si el rack tiene exceso de suministro, el aire frío puede pasar por alto el equipo. Si el pasillo caliente no se gestiona adecuadamente, el escape puede derramarse sobre el estante o alrededor de los extremos de las filas. Ambas condiciones pueden hacer que la temperatura del aire de retorno parezca mejor mientras que la temperatura de entrada del servidor sea peor.
| Pregunta | Medición | Decisión de ingeniería |
|---|---|---|
| ¿El aire entrante está dentro del sobre declarado? | Temperatura de entrada del rack en la parte superior, media e inferior. | Proteja la zona local más caliente, no el promedio de la habitación. |
| ¿El aire cruza en la dirección prevista? | control de humos, grifos de presión y diferencia de temperatura | sellar o redirigir antes de aumentar la velocidad del ventilador |
| ¿Está funcionando el ventilador del servidor en su punto instalado? | comando de ventilador, RPM, corriente y referencia P-Q | seleccione o ajuste el ventilador para la restricción real |
| ¿Está ayudando la contención? | Temperaturas de entrada y salida con paneles instalados. | Confirme que se reducen la derivación y la recirculación. |
| ¿La condición sobrevive a un cambio de carga de trabajo? | registros inactivos, de inferencia normal, de picos y de transición | validar el bucle de control en lugar de una instantánea |
El síntoma inicial no fue una falla del ventilador
El mismo ventilador RPM parecía normal, pero la temperatura de entrada superior se movía con las condiciones límite del pasillo y del estante.
Durante la primera ejecución, los módulos de ventilador del servidor alcanzaron la velocidad de retroalimentación esperada. Ese resultado podría haberse interpretado erróneamente como una prueba de que los ventiladores estaban en buen estado y el bastidor necesitaba más capacidad de refrigeración. El mapa de temperatura contaba una historia diferente: la entrada superior subió después de que el pasillo caliente alcanzó una presión más alta, y cayó cuando se cubrió un espacio superior temporal.
Un ejemplo de planificación mostró el riesgo. Si un bastidor de 10 kW recibe aire a 20 °C, un equilibrio simplificado del lado del aire que utiliza una densidad de 1,2 kg/m³ y un calor específico de 1,005 kJ/kg-K da aproximadamente 0,83 kg/s para un aumento de aire de 12 °C, o aproximadamente 2500 m³/h. Esta es una estimación de ingeniería para enmarcar la prueba, no un requisito de bastidor universal. Si parte de ese flujo pasa por alto los servidores o el aire caliente regresa a la entrada, el enfriamiento útil es menor aunque el medidor de flujo de aire de la habitación pueda parecer adecuado.
Por lo tanto, el equipo dejó de tratar el número de flujo de aire de la habitación como el resultado del rack. Mapeó por dónde entraba el aire, por dónde cruzaba los disipadores de calor del servidor y por dónde regresaba. Esta distinción también evitó una decisión innecesaria de aumentar el tamaño del ventilador antes de corregir la instalación.
Revisión mecánica: cierre los atajos antes de cambiar el ventilador
El estante tenía varias aberturas pequeñas que eran inofensivas individualmente pero que en conjunto eran lo suficientemente fuertes como para crear una ruta de recirculación.
La primera revisión instaló paneles ciegos en posiciones de bastidor no utilizadas y verificó el sello alrededor de la bandeja del ventilador extraíble. Las aberturas para cables se cepillaron o cubrieron donde conectaban los lados frío y caliente. El equipo también revisó la contención del extremo de la fila y el espacio libre sobre el estante. El objetivo no era sellar permanentemente todas las aperturas de servicios; era hacer que el camino previsto fuera más fuerte que el camino no previsto.
Una segunda revisión verificó la dirección del equipo. Los servidores de adelante hacia atrás deben estar dispuestos de manera que los equipos vecinos no descarguen en una entrada. Los equipos de flujo de aire no estándar necesitan un deflector específico o una zona separada. Un bastidor se puede organizar correctamente al nivel de la fila y aún tener un estante, un interruptor o una unidad de energía que invierta el flujo local.
Después de los cambios mecánicos, el comando del ventilador del servidor se mantuvo constante. Esto aisló el beneficio de la corrección de la trayectoria del aire del beneficio de cualquier ajuste posterior del ventilador. La temperatura de entrada se volvió más uniforme antes de que se cambiara la curva del ventilador.
La selección del ventilador siguió siendo importante después de que se arregló la ruta del aire
La contención no puede compensar un ventilador que no alcanza el punto de presión instalado, y un ventilador más potente no puede compensar una rejilla con fugas.
Una vez controlada la dirección del flujo de aire, MEGA Tech comparó el ventilador candidato con la restricción real del servidor. El registro incluía presión o flujo de aire en la bandeja, rango de voltaje, comando PWM, comportamiento de FG/RD, corriente, ruido y temperaturas locales del disipador de calor. No se aceptó el reemplazo a partir de un valor máximo de CFM únicamente.
El equipo utilizó la curva del ventilador P-Q y una curva estimada de resistencia de la cremallera para definir el punto de trabajo. Por ejemplo, si se anuncia un candidato en 60 CFM en aire libre pero la bandeja y los disipadores de calor requieren 8 mmH2O, el flujo de aire entregado puede ser sustancialmente menor. El resultado exacto depende de las curvas del ventilador y del sistema; el número de planificación debe medirse en la bandeja real.
La revisión de la muestra también consideró la estabilidad del control. Si el sensor de entrada está ubicado en una bolsa de recirculación, el controlador puede aumentar RPM, sobrepasar y luego reducir la velocidad repetidamente. Una vez corregida la trayectoria, la curva de control se pudo ajustar en torno a una señal más limpia. Eso redujo la tentación de utilizar un alto mando permanente como sustituto de la gestión del flujo de aire.
Secuencia de validación: probar el bastidor en tres estados de carga de trabajo
La verificación final comparó la dirección del flujo de aire, la temperatura de entrada y el funcionamiento del ventilador durante una secuencia de carga de trabajo repetible.
El cliente utilizó tres estados: inactivo o de baja utilización, inferencia representativa y computación máxima. Un cuarto paso de transición movió el calor de una zona a otra para que el equipo pudiera observar la respuesta de control. En cada estado, el registro capturó las temperaturas de entrada del rack en múltiples alturas, la temperatura de escape, el comando del ventilador, RPM, la temperatura actual y de los componentes locales.
La lógica de aceptación se basó en la entrada y el componente protegidos más calientes, no solo en el promedio. Un ejemplo de planificación utilizó una diferencia máxima de 5 °C entre los sensores de entrada superior e inferior después de la estabilización. Ese valor es ilustrativo y debe ser reemplazado por el presupuesto térmico del fabricante del servidor. El punto importante es definir la ubicación, la ventana de tiempo y la carga de trabajo antes de realizar la prueba.
El equipo repitió la secuencia quitando y reinstalando el panel de contención. Esa verificación A/B hizo visible el valor de la instalación para los equipos de adquisiciones e instalaciones. También mostró si un cambio de ventilador estaba resolviendo el problema de la rejilla o simplemente enmascarando una fuga.
El resultado fue una entrada estable, no solo un RPM más alto
El integrador obtuvo un método de puesta en marcha repetible y unos requisitos de ventilador más claros para la próxima revisión de la plataforma.
Una vez corregidas las aberturas y las interfaces de contención, se pudo evaluar el rack con un comando de ventilador más bajo y más controlado. Los valores exactos de temperatura, flujo de aire y potencia siguen siendo específicos del proyecto, pero el resultado de ingeniería fue transferible: el cliente podía distinguir la pérdida de la ruta de aire de la pérdida de capacidad del ventilador y podía preguntar al proveedor del ventilador cuál era el servicio instalado que realmente importaba.
Esto también mejoró la comparación de compras. Un ventilador de reemplazo tenía que igualar la presión de la bandeja del servidor y el comportamiento de control, preservando al mismo tiempo la dirección del flujo de aire, el conector, el montaje y el acceso de servicio. Si el cliente cambiaba posteriormente la rejilla o el disipador de calor, era necesario volver a comprobar el punto de funcionamiento; el número de ventilador no se pudo copiar ciegamente en la nueva configuración.
Para un nuevo servidor de IA o un integrador más pequeño, el mismo proceso puede comenzar con un chasis de cliente y una bandeja extraíble. MEGA Tech puede hacer una pequeña muestra, revisar el ventilador en torno a la presión y el flujo de aire medidos y respaldar el paquete de evidencia antes de una producción más grande.
Cómo MEGA Tech admite la validación del flujo de aire del rack con IA
MEGA Tech desarrolla ventiladores axiales y sopladores compactos DC personalizados en función de la aplicación instalada, no en torno a un título de catálogo.
Podemos revisar el marco y el grosor del ventilador, la dirección del flujo de aire, el objetivo de presión y flujo, el control de voltaje o PWM, la retroalimentación del FG/RD, el conector, la salida del cable, el montaje, el objetivo acústico, la configuración de los rodamientos y la restricción real de la rejilla o del disipador de calor. Para una aplicación de servidor, la primera entrada más útil es la muestra completa de la bandeja o del chasis junto con la carga de trabajo, el límite de temperatura de entrada y la interfaz del ventilador actual.
El ciclo de desarrollo puede incluir una línea de base con el ventilador original, muestras candidatas, verificaciones de P-Q instalado, mapeo de temperatura de entrada y escape, respuesta de control, ruido y validación del estado de servicio. MEGA Tech también puede respaldar el desarrollo de reemplazo para plataformas de ventiladores industriales ampliamente utilizadas, pero el fabricante del servidor sigue siendo responsable de la aprobación completa del sistema, la confiabilidad, la EMC, la seguridad y la integración del centro de datos.
No presentamos una muestra de ventilador como sustituto del diseño de refrigeración de una instalación, circuito de líquido, intercambiador de calor de puerta trasera o sistema de control DCIM. Esos sistemas requieren su propio diseño verificado. Nuestra función es ayudar a que el ventilador y su recorrido de aire instalado sean medibles y estén listos para la producción.
Preguntas de ingenieros sobre la recirculación de racks de IA
Utilice estas preguntas antes de aprobar una velocidad de ventilador más alta o un nuevo proveedor de ventiladores.
P: ¿Por qué un bastidor puede tener un ventilador normal RPM pero una entrada de agua caliente? R: RPM demuestra rotación, no que el aire llegue al disipador de calor y salga por el camino previsto.
P: ¿Se debe aumentar primero el tamaño del ventilador? R: Primero verifique la derivación, la recirculación, los paneles ciegos, la dirección de las filas y la contención. Luego seleccione el ventilador a la presión instalada medida.
P: ¿La contención del pasillo caliente o del pasillo frío siempre resuelve el problema? R: No. La elección depende del diseño de la habitación y del servicio; Cualquiera de los dos enfoques aún necesita la dirección correcta de la cremallera, espacios sellados y condiciones de entrada medidas.
P: ¿Qué se debe medir a nivel de rack? R: Temperatura de entrada a varias alturas, temperatura de escape, comando del ventilador, RPM, corriente, presión o flujo de aire proxy, carga de trabajo y temperatura del componente local.
P: ¿Se puede utilizar este caso como reclamo de rendimiento garantizado del centro de datos? R: No. Es un patrón de caso de ingeniería anónimo. El operador del centro de datos y el fabricante del servidor deben validar sus propios límites de rack, espacio y seguridad.
Preguntas para una revisión del flujo de aire del centro de datos de IA
Una breve lista de verificación convierte una queja vaga en un requisito comprobable.
- ¿El flujo de aire del servidor va de adelante hacia atrás y todos los dispositivos adyacentes están alineados en esa dirección?
- ¿Dónde se miden las temperaturas de entrada de la rejilla superior, media e inferior?
- ¿Están sellados o gestionados intencionalmente los espacios en U no utilizados, las aberturas para cables, los bordes de las bandejas y los extremos de las filas?
- ¿El rack tiene derivación de aire frío alrededor del equipo o recirculación de aire caliente en la entrada?
- ¿Cuáles son los comandos reales del ventilador, RPM, corriente y presión o flujo de aire en la bandeja instalada?
- ¿Qué estado de carga de trabajo produce el componente local más activo?
- ¿Oscila el circuito de control del ventilador cuando cambia la temperatura de entrada?
- ¿Qué cambia cuando se retira, abre o restaura la contención?
- ¿Qué sucede durante una falla del ventilador, un evento de servicio o un intercambio en caliente temporal?
- ¿Qué valores pertenecen al proveedor del ventilador y cuáles requieren una validación completa del servidor y de las instalaciones?
