Ticker

6/recent/ticker-posts

Ad Code

Responsive Advertisement

IA local de verdad: QNAP lanza el NAS QAI-h1290FX que ejecuta LLMs sin depender de la nube


El fabricante QNAP acaba de lanzar el nuevo servidor NAS especializado en potenciar la IA local como nunca antes habíamos visto. El nuevo QAI-h1290FX incorpora un hardware de primer nivel para hacer frente a los retos de las nuevas herramientas de IA, las cuales necesitan una gran potencia de cálculo, y también un rápido y gran almacenamiento para gestionar todos los modelos LLM que se actualizan cada semana. Si quieres conocer todos los detalles técnicos sobre este modelo que acaban de lanzar, a continuación, tenéis todos los detalles.

Este servidor NAS está diseñado para actuar como «Edge AI«, es decir, como NAS que se encargará de gestionar las cargas de trabajo de los diferentes modelos de lenguaje grandes (LLM) y también de IA generativa. El fabricante QNAP siempre ha dado mucha importancia a lo local, y buena muestra de ello es este nuevo equipo que nos permitirá hacer funcionar los modelos locales más avanzados que hay hasta ahora, los cuales requieren de un hardware muy potente para que se puedan usar sin problemas.

Principales características

Este nuevo servidor NAS incorpora un potentísimo procesador AMD EPYC 7302P, tiene 16 núcleos y 32 hilos a una velocidad base de 3.0GHz de velocidad, y en modo turbo puede alcanzar hasta los 3.3GHz. Este equipo es ideal para gestionar tareas muy pesadas, por lo que es perfecto para inferencia de IA, virtualización y cargas de trabajo en paralelo. El equipo permite instalar hasta 1TB de memoria RAM DDR4 ECC como máximo (8 módulos de 128GB cada uno de ellos).

La IA requiere de una NPU potente, o bien de una GPU potente para acelerar todo el procesamiento. En este caso, el NAS permite instalar una GPU NVIDIA RTX PRO 6000 (basada en la arquitectura Blackwell), la cual dispone de 96GB de memoria de GPU GDDR7 ECC, y usa una interfaz PCIe 5.0 x16 para tener el mayor ancho de banda. Esta tarjeta gráfica dispone de compatibilidad con aceleración CUDA (tiene 24.064 núcleos), TensorRT (tiene 752 núcleos) y Transformer Engine (tiene 188 núcleos), por lo que tendremos un gran rendimiento para la inferencia de LLM local, para la generación y reconocimiento de imágenes, así como para cargas de trabajo de Deep Learning. En total, esta tarjeta cuenta con 125TFLOPS FP32, y hasta 4000 TOPS de IA.

Servidor de almacenamiento Edge AI QNAP QAI-h1290FX con soporte para tarjetas gráficas NVIDIA RTX Pro en un entorno de centro de datos.
El nuevo QNAP QAI-h1290FX está diseñado para aplicaciones de inteligencia artificial on-premise con soporte para GPUs NVIDIA RTX. Foto: QNAP

El almacenamiento de este NAS consta de un total de 12 ranuras para instalar unidades SSD U.2 NVMe/SATA, esto nos permitirá obtener una gran velocidad de lectura y escritura, haciendo que la ejecución de modelos de IA funcione con total fluidez, así como para compartir archivos y carpetas en la red local.  Para tener el mejor rendimiento en la red local, cuenta con doble puerto a 25Gbps, no obstante, también tenemos 2 puertos 2.5G Multigigabit, y la posibilidad de ampliar los puertos USB y puertos de red mediante tarjetas de expansión conectadas a los puertos PCIe disponibles.

QNAP QAI-h1290FX: Ficha técnica
ComponenteEspecificaciónBeneficio IA
ProcesadorAMD EPYC 7302P (16 núcleos/32 hilos)Paralelismo para virtualización y contenedores
GPU (Opcional)NVIDIA RTX PRO 6000 (Blackwell)96GB VRAM GDDR7 para LLM grandes
RAMHasta 1TB DDR4 ECCCarga de modelos complejos en memoria
Almacenamiento12 bahías SSD U.2 NVMeVelocidad extrema para datasets de entrenamiento
RedDoble puerto 25Gbps + 2.5G MultigigTransferencia rápida de datos en clúster

En la era de la IA, también es fundamental el software, en este caso, contamos con un sistema operativo QuTS hero con el popular sistema de archivos ZFS para proteger la integridad del dato de manera óptima. Otras características muy importantes son las siguientes:

Enregistrer un commentaire

0 Commentaires