Racks de IA líquidos: ventiladores auxiliares

La refrigeración líquida no significa flujo de aire nulo

Una placa fría puede eliminar la carga de calor dominante mientras que el resto de la rejilla aún depende del movimiento de aire controlado.

La frase bastidor de IA refrigerado por líquido a menudo se interpreta de manera demasiado amplia. La refrigeración líquida directa al chip puede eliminar el calor de CPU y GPU seleccionados a través de placas frías, colectores, mangueras, una unidad de distribución de refrigerante y un circuito de rechazo de calor. No elimina automáticamente el calor de todos los componentes eléctricos, ópticos y mecánicos del bastidor. Los conmutadores de red, la memoria, el almacenamiento, las fuentes de alimentación, los reguladores de voltaje, los tableros de control, las bombas y el hardware de detección de fugas aún pueden intercambiar calor con el aire.

Eso crea un problema de enfriamiento híbrido. El lado del aire puede transportar una fracción menor del calor total del rack que en un servidor convencional, pero aun así puede proteger los componentes que no están en el circuito de líquido. La carga de aire restante también se puede concentrar en una zona física más pequeña, lo que hace que el flujo de aire local y la presión del ventilador sean más importantes que un simple número CFM promedio de rack.

Esta guía brinda a los ingenieros una manera de definir la carga de aire residual, seleccionar un ventilador auxiliar o un módulo de ventilador y validar el resultado instalado. No afirma que todos los racks refrigerados por líquido necesiten el mismo ventilador. El dibujo del bastidor, el mapa de componentes, la temperatura del refrigerante, la ruta del aire y los requisitos de servicio deben impulsar la decisión.

Mapee los componentes que aún dependen del aire

La selección del ventilador comienza con las partes que el circuito de refrigerante realmente no toca.

Cree un mapa de calor del bastidor antes de elegir un ventilador. Marque dispositivos enfriados por líquido, dispositivos enfriados por aire, estantes eléctricos, barras colectoras, módulos ópticos, bahías de almacenamiento, controladores de gestión, componentes electrónicos de bombas y cualquier zona del gabinete que pueda acumular calor. Registre la potencia de los componentes en inactivo, carga de IA normal y el estado operativo más alto creíble. Un componente que parece pequeño en el rack aún puede tener un margen térmico estrecho si su ruta de flujo de aire está bloqueada por mangueras o haces de cables.

Separe la carga de calor del lado del aire de la potencia total del rack. Si un bastidor de 100 kW envía 80 kW a través del circuito de refrigerante, los 20 kW restantes no son automáticamente una carga de aire de 20 kW con el mismo aumento de temperatura porque parte del sistema de líquido, la bomba y la estructura también pueden rechazar calor a la habitación. Utilice pérdidas de componentes medidas o proporcionadas por el proveedor y mantenga el límite explícito.

Como estimación ilustrativa, supongamos que la red y la electrónica de potencia aportan 12 kW al recorrido del aire y el diseño permite un aumento de la temperatura del aire de 10 °C. Con un calor específico del aire cercano a 1005 J/(kg·K), el flujo másico requerido es aproximadamente 12 000/(1005 × 10) = 1,19 kg/s. Convertir eso en flujo volumétrico requiere la densidad y altitud del aire reales. El cálculo es un punto de partida, no un reemplazo de una prueba instalada.

No utilice la temperatura del suministro de líquido como punto de ajuste del ventilador de aire

La temperatura del refrigerante y la temperatura de los componentes del lado del aire están relacionadas, pero no son señales de control intercambiables.

El circuito de refrigerante puede permanecer dentro de su objetivo mientras un interruptor de red o estante de energía enfriado por aire ve una entrada caliente. Por el contrario, aumentar la temperatura del suministro de líquido puede ser aceptable para la placa fría, pero puede reducir el margen de un componente cercano enfriado por aire. Por lo tanto, el controlador de aire debe utilizar sensores que representen el límite térmico del lado del aire, no solo el valor de suministro o retorno de la CDU.

Coloque sensores de temperatura del aire en la entrada real del componente de carga residual. Compare las posiciones superior, media e inferior si el componente abarca una altura de rack y verifique las posiciones cercanas/lejanas donde el ventilador o el conducto crean un gradiente. Si la ruta del aire pasa a través de un filtro, protector, disipador de calor o espacio estrecho para cables, mida la presión y la temperatura después de esa restricción.

Para un ejemplo de puesta en servicio, el retorno de una CDU puede permanecer a 34°C mientras que la entrada del estante eléctrico trasero varía de 27°C cerca del ventilador a 33°C en el otro extremo. Un controlador que utilice únicamente el retorno de la CDU puede pasar por alto el problema espacial. La respuesta del ventilador debe validarse con respecto al peor punto del lado del aire y un canal de alarma independiente.

Interactivo: vea cómo se encuentran los dos caminos termales

El esquema separa la ruta del líquido de la ruta del aire auxiliar y muestra cómo un haz de mangueras o una abertura de derivación pueden cambiar el funcionamiento del ventilador.

Utilice la animación para definir el límite de la prueba. Etiquete qué componentes se enfrían con líquido, cuáles con aire y dónde las dos rutas de calor intercambian energía con la habitación. Luego pruebe la ruta del aire con la disposición de mangueras, el haz de cables, el filtro, la protección y las puertas del bastidor en sus posiciones reales.

Un ventilador puede mostrar una fuerte velocidad de salida mientras el aire pasa por alto el estante de energía o fluye alrededor de la bandeja del interruptor. Mida en la entrada y salida del componente, no solo en la cara del ventilador. Si la posición de una manguera o de una conexión rápida cambia entre el prototipo y la producción, repita la prueba de presión y temperatura porque la curva del sistema ha cambiado.

Este es un modelo cualitativo, no un resultado CFD. Su propósito es evitar un error de diseño común: tratar un rack enfriado por líquido como una ruta térmica única y eliminar el requisito del ventilador antes de mapear la carga de aire restante.

Seleccione el ventilador auxiliar a presión, no a aire libre CFM

Las mangueras, los haces de cables, los disipadores de calor, las mallas, los filtros y los espacios estrechos entre bastidores pueden consumir el margen de presión de un ventilador pequeño.

Defina la ruta del aire auxiliar desde la entrada hasta la salida. Incluya la abertura del bastidor, el protector de entrada, el filtro, el disipador de calor, la bandeja de interruptores, el estante eléctrico, la obstrucción de mangueras o cables, el codo, la rejilla de escape y cualquier resistencia de la puerta trasera o del lado de la habitación. La curva P-Q del ventilador debe cruzar esta curva del sistema en el flujo de componente requerido y el aumento de temperatura.

Para un ramal ilustrativo, una bandeja de red requiere 420 m3/h a un estimado de 145 Pa: 35 Pa a través de la malla de entrada, 40 Pa a través del disipador de calor de la bandeja, 25 Pa a través de la región de cables y mangueras, y 45 Pa a través de la rejilla de escape. Si un filtro de servicio añade otros 30 Pa, el ventilador seleccionado debe comprobarse cerca de 175 Pa, no a presión cero. Los valores exactos deben proceder del hardware instalado o de datos fiables del proveedor.

Los ventiladores axiales pueden ser adecuados para un camino de baja resistencia con una amplia apertura. Un soplador compacto o un diseño axial de mayor presión pueden ser más estables a través de una bandeja, filtro o intercambiador de calor restrictivo. Elija según el punto de funcionamiento instalado, el ruido, la entrada eléctrica, el rango de control, el tamaño y el acceso de mantenimiento en lugar de solo por el tipo de ventilador.

• Enumere cada restricción y marque si su pérdida es medida, proporcionada por el proveedor o estimada.
• Pruebe los filtros limpios y en estado de servicio si la ruta del aire incluye filtración.
• Compruebe si las mangueras y los haces de cables cambian el área de entrada después del montaje.
• Compare los ventiladores candidatos con el mismo voltaje, comando PWM y presión.
• Verifique que el ventilador tenga un arranque estable y retroalimentación al mínimo requerido.

El control del ventilador debe seguir la carga de aire residual

El ventilador auxiliar no debe funcionar a un máximo fijo simplemente porque el circuito GPU esté ocupado.

La carga de trabajo de un GPU puede ser alta mientras que la carga de red o de almacenamiento es moderada, y también puede ocurrir lo contrario durante el movimiento de datos o la inicialización del sistema. Por lo tanto, el controlador del ventilador auxiliar debe utilizar la señal de temperatura o potencia de los componentes enfriados por aire, con límites y manejo de fallas adecuados. Una única señal global de alimentación de rack puede ser útil como término de retroalimentación, pero no debe reemplazar la protección local.

Valide el rango de control PWM o EC, servicio mínimo estable, retroalimentación del tacómetro o FG, bloqueo del rotor o alarma RD, arranque después de un largo período de inactividad y reinicio después de una interrupción de energía. En un bastidor enfriado por líquido, la exposición a la humedad o la condensación también puede diferir cerca de la CDU y cerca de la entrada de aire, por lo que la protección del conector y la electrónica debe ser parte de la especificación.

A modo de comparación de energía ilustrativa, seis ventiladores auxiliares de 24 V y 0,22 A utilizan 31,7 W a pleno rendimiento. Si una regla de control validada los hace funcionar a 0,12 A durante el 75 % de un día de 24 horas y a 0,22 A durante el 25 % restante, el promedio es de aproximadamente 17,3 W, o 415 Wh por día. El valor es sólo la entrada del ventilador; Se debe medir toda la interacción entre el bastidor y el circuito de enfriamiento antes de reclamar un ahorro de energía en el sistema.

El enfriamiento mixto necesita una prueba de falla diferente

Una alarma de circuito de líquido y una alarma de ventilador de aire protegen diferentes partes del bastidor y no deben agruparse en una falla genérica.

Pruebe la ruta de aire auxiliar con un ventilador detenido, una rama obstruida, un filtro cargado y el circuito de líquido en su condición de funcionamiento cálida prevista. Observe la temperatura del estante de energía, la bandeja de red, la memoria o la entrada de almacenamiento y la alarma del controlador. Un circuito de líquido en buen estado no puede compensar un componente enfriado por aire que ha perdido su ruta de flujo local.

Pruebe también el estado de una bomba o CDU que cambie la temperatura del aire circundante. Es posible que el ventilador de aire deba responder al calor residual emitido por el sistema de líquido y su electrónica de potencia. Por el contrario, un ventilador de aire defectuoso no debería desencadenar un apagado innecesario del rack completo si el componente afectado puede protegerse mediante una reducción de carga o un procedimiento de servicio definido.

Para un ejemplo de falla simple, cuatro ventiladores auxiliares proporcionan cada uno 280 m3/h a la presión instalada. El total saludable es de 1.120 m3/h. Si un ventilador se detiene y los otros tres aumentan a 330 m3/h, el total teórico se convierte en 990 m3/h antes de que se consideren el cambio de presión del sistema y la fuga inversa. Mida el flujo útil real en el componente, no solo la suma de las clasificaciones del catálogo.

Ejemplo de un cliente anónimo: refrigeración por aire agregada a un bastidor piloto enfriado por líquido

Un desarrollador norteamericano de sistemas de inteligencia artificial utilizó una muestra de ventilador auxiliar personalizada después de que su primer prototipo refrigerado por líquido dejara las zonas de energía y red poco validadas.

El bastidor piloto utilizó placas frías para los módulos de cómputo principales. Durante las pruebas de carga de trabajo extendidas, las temperaturas del refrigerante se mantuvieron estables, pero la bandeja de red y el estante de energía mostraron un aumento de la temperatura del lado del aire cerca del conjunto de cables y mangueras. La selección original del ventilador se basó en el flujo de aire libre y no incluía la malla instalada, la entrada de bandeja estrecha ni la resistencia de escape trasera.

MEGA Tech revisó el mapa de calor restante del lado del aire, la envolvente del ventilador, el voltaje, los requisitos de PWM y FG, el recorrido de las mangueras, el estado del filtro y el nivel de ruido objetivo. Se compararon dos muestras: un ventilador axial de baja presión más grande y un módulo compacto de alta presión. La evaluación utilizó los mismos grifos de presión y sondas de temperatura en restricciones de estado normal y de servicio.

El módulo compacto produjo un punto de funcionamiento más estable a través de la bandeja restrictiva, mientras que el ventilador axial más grande movió más aire en el dispositivo de prueba abierto pero perdió más flujo útil después de la instalación. Luego, el cliente ajustó el soporte y la ruta del cable, volvió a probar el comportamiento de apagado único y configuró una alarma de temperatura local separada de la alarma del circuito de líquido.

La lección transferible es que la refrigeración híbrida necesita dos planes de aceptación conectados pero separados. El circuito de líquido debe validarse para sus funciones de eliminación de calor y gestión de fugas, mientras que el ventilador auxiliar debe validarse según la presión instalada y el estado de falla del componente enfriado por aire.

Aceptación de producción para un bastidor de IA híbrido

La especificación final debe mostrar el límite de enfriamiento, el componente que limita el recorrido del aire y la evidencia tanto del estado normal como del de falla.

Documente qué componentes se enfrían por líquido, cuáles permanecen enfriados por aire y cuáles reciben enfriamiento mixto o indirecto. Defina el objetivo del lado del aire en la entrada del componente, el aumento de temperatura permitido, el punto de presión, el límite de ruido, el voltaje, la interfaz PWM/EC, las señales de retroalimentación, la exposición ambiental y el estado de mantenimiento. Mantenga el límite OEM de TI separado del límite mecánico y eléctrico del proveedor del ventilador.

Repita la prueba con la disposición final de mangueras y cables, puertas, rejillas, filtros, disipadores de calor y ruta de escape. Registre la velocidad o el flujo del aire, la presión diferencial, la temperatura, la corriente, el comando, la retroalimentación, la salida acústica y la vibración. Si el ventilador forma parte de un programa de sustitución, compare ambas unidades en el mismo punto de instalación y no sólo en una mesa.

Incluya los casos de transición: calentamiento del circuito de líquido, paso de carga de trabajo de IA, explosión de la red, un ventilador auxiliar detenido, una rama restringida, filtro cargado y reinicio del controlador. Un diseño que funciona sólo en estado estable puede aún fallar durante la transición operativa exacta que hace que la refrigeración híbrida sea valiosa.

Preguntas frecuentes de los ingenieros: ventiladores auxiliares para racks de IA con refrigeración líquida

Estas preguntas ayudan a los equipos a evitar eliminar la ruta del aire antes de comprender el calor residual y la resistencia instalada.

P: Si las placas frías GPU están refrigeradas por líquido, ¿por qué se siguen necesitando ventiladores? R: La red, la memoria, el almacenamiento, la electrónica de potencia, los controladores y el calor residual aún pueden depender del aire. Los requisitos exactos dependen del diseño del bastidor.

P: ¿Puedo dimensionar el ventilador auxiliar a partir del total de kW del bastidor? R: No de forma segura. Separe el calor del circuito de líquido de la carga residual del lado del aire e identifique el componente que establece el límite de temperatura local.

P: ¿El ventilador debe seguir la temperatura del refrigerante? R: La temperatura del refrigerante puede ser una señal útil de retroalimentación, pero la temperatura de entrada del lado del aire y la protección de los componentes deben validarse por separado.

P: ¿Es siempre mejor un ventilador axial más grande que un soplador compacto? R: No. Un ventilador más grande puede tener un mayor flujo de aire libre, pero pierde su ventaja detrás de mallas, filtros, disipadores de calor, mangueras o aberturas de bandeja estrechas.

P: ¿Qué presión se debe utilizar para la selección? R: Utilice la presión instalada creada por la protección, el filtro, la bandeja, el disipador de calor, la región del cable/manguera y la ruta de escape, luego verifique los estados de limpieza y servicio.

P: ¿Qué se debe probar durante una falla del ventilador? R: Temperatura de entrada del componente, flujo útil, presión, fuga inversa, sincronización de alarma, funcionamiento restante del ventilador y reducción de carga o respuesta de servicio.

P: ¿Puede MEGA Tech admitir un prototipo de enfriamiento híbrido de IA? R: Sí. Podemos revisar el límite de enfriamiento, ajustar un ventilador o soplador axial personalizado, construir muestras y soportar validación térmica, acústica y eléctrica de presión.

Lista de verificación de revisión del ventilador híbrido AI-Rack

Utilice esta lista de verificación antes de retirar los ventiladores de un diseño enfriado por líquido o congelar una especificación de reemplazo.

• ¿Están identificados todos los componentes refrigerados por líquido y por aire en el mapa de calor del rack?
• ¿Se separa el calor residual del lado del aire de la potencia total del rack?
• ¿Están los sensores de aire ubicados en la entrada real de energía, red, memoria o almacenamiento?
• ¿Se seleccionó el ventilador a la presión instalada en lugar del CFM de aire libre?
• ¿Se incluyeron mangueras, haces de cables, filtros, protectores y disipadores de calor en la ruta del sistema?
• ¿Se verificaron el servicio mínimo de PWM/EC, la retroalimentación, el inicio y el reinicio de FG/RD?
• ¿Se detuvo un ventilador auxiliar y se midió la fuga inversa o la pérdida de flujo útil?
• ¿Se incluyeron las condiciones de refrigerante caliente, explosión de red y paso de carga de IA?
• ¿Se comprobaron el ruido, la vibración, la vida útil de los rodamientos, la humedad y la protección del conector?
• ¿Están claramente separados los valores medidos, las estimaciones, los límites de TI y los límites del ventilador?