IOSG: Del almacenamiento en caliente a la memoria en frío: Almacenamiento descentralizado bajo la fiebre de la IA

Autor: 0xjacobzhao, IOSG

Recientemente, "la primera acción china de almacenamiento", ChangXin Memory, se listó oficialmente en la Junta de Crecimiento Empresarial de China (ChiNext), causando sensación con una impresionante subida del 500%. Aunque el sector de almacenamiento en general aún está afectado por las ondas residuales de un ajuste, el almacenamiento para IA sigue siendo revalorizado locamente por el capital en la actual narrativa tecnológica. Mientras tanto, el almacenamiento descentralizado en el ámbito Web3 ha caído en un largo silencio y olvido. ¿Por qué, compartiendo ambos el nombre de "almacenamiento", su rendimiento en el mercado es tan diametralmente opuesto? La respuesta fundamental radica en una división total de la función de valor subyacente.

La revalorización del almacenamiento en la era de la IA es, en esencia, una fiesta centrada en la "eficiencia de los datos calientes", que sirve para maximizar la utilización del poder computacional y la monetización comercial; mientras que el almacenamiento descentralizado defiende la propuesta de valor de la "confianza en los datos fríos", salvaguardando la equidad de datos, la resistencia a la censura y la memoria a largo plazo de la civilización humana. El primero es un sistema de eficiencia para datos calientes, el segundo es un sistema de confianza para datos fríos. El mercado de capitales actual sin duda se posiciona firmemente del lado de la "eficiencia", pero la civilización humana finalmente necesita una base de memoria inmutable. El valor a largo plazo del almacenamiento frío confiable nunca ha desaparecido, simplemente está latente en el lado oscuro del ciclo, esperando ser revalorizado por la época.

Por qué el almacenamiento vuelve a ser el centro de atención en la cadena industrial de la IA

En la era de las TI tradicionales, el almacenamiento era un "negocio de capacidad". Los CIO corporativos se centraban en el coste por unidad de capacidad, la fiabilidad del disco, las soluciones de recuperación ante desastres, las estrategias de archivado y los ciclos de actualización de equipos de 3 a 5 años. El almacenamiento se consideraba un accesorio que seguía a la compra de servidores.

La actual fiebre del almacenamiento no es una recuperación del ciclo tradicional, sino una revalorización por parte de la IA de la capacidad de flujo de datos. En la era de los modelos grandes, la lógica del almacenamiento cambia cualitativamente de "priorizar la capacidad" a "primar la eficiencia", persiguiendo indicadores límite como la tasa de alimentación de GPU, la escritura de Checkpoints y la latencia ultrabaja en RAG. Esto marca que el valor del almacenamiento está saltando de ser "el destino final de los datos" a convertirse en "el canal de alta velocidad para que los datos entren en el cálculo".

La evolución del cuello de botella en la infraestructura de IA es, en esencia, una batalla por completar el "efecto del barril". La utilización real del poder computacional no es la suma lineal de activos individuales, sino un estricto efecto multiplicador: Utilización real del poder de cómputo = GPU × HBM × DRAM × SSD × Red × Sistema de archivos. Cualquier punto débil en un eslabón puede provocar el colapso de la utilización general del poder de cómputo. En la era de la IA, el almacenamiento pasa por primera vez de ser un «centro de coste» a un «motor de eficiencia». Esta es la lógica fundamental detrás de la revalorización del almacenamiento.

Panorama de la arquitectura de almacenamiento de IA: Desde el órgano de ancho de banda HBM hasta la base del data lake

El almacenamiento para IA no es una simple acumulación de hardware, sino un sistema complejo de capas estrechamente acopladas y planificadas. En este sistema, el valor industrial y el foco del capital se concentran fuertemente en el HBM, SSD empresariales, controladores de SSD, protocolos NVMe/CXL y sistemas de almacenamiento de alto rendimiento. Para desglosar claramente su flujo de valor, dividimos la arquitectura de almacenamiento de IA en cuatro niveles centrales:

• Capa de memoria cercana al cálculo (Núcleo de ancho de banda): Con HBM como fuerza absoluta, complementado con DRAM y tecnología de agrupación de memoria CXL. Esta capa está directamente unida al encapsulado o bus de la GPU/CPU, con el objetivo de romper el "muro de memoria", siendo la primera barrera que determina si el poder de cómputo puede liberarse plenamente.

• Capa de almacenamiento persistente de alta velocidad (Centro de E/S): Su lógica central es SSD empresarial = chips NAND + controlador SSD + vía de datos NVMe/PCIe. Esta capa soporta escrituras frecuentes de Checkpoints, carga de conjuntos de entrenamiento masivos y caché de datos calientes para RAG, siendo el incremento más claro en almacenamiento persistente en centros de datos de IA.

• Capa de almacenamiento de gran capacidad y bajo coste (Base de capacidad): Compuesta por HDD, almacenamiento en frío y sistemas de archivado tipo data lake. Frente a la expansión exponencial de datos originales multimodales, registros históricos y copias de seguridad para cumplimiento normativo, esta capa sigue ofreciendo una ventaja insustituible en TCO (Coste Total de Propiedad).

• Sistema de almacenamiento de IA y software de datos (Cerebro de planificación): Incluye sistemas de archivos paralelos de alto rendimiento, almacenamiento de objetos distribuido, bases de datos vectoriales y la capa de gobernanza de datos RAG. La IA no consume realmente hardware desnudo, sino la disponibilidad de datos organizados, indexados y con permisos de forma eficiente por la pila de software.

Como extensión del ecosistema, el almacenamiento descentralizado no se involucra directamente en la competición por milisegundos de los datos calientes de IA, sino que se centra en la certificación de conjuntos de datos públicos, la trazabilidad de datos de entrenamiento de IA (Provenance) y el archivado a largo plazo de memoria fría, estableciendo su nicho ecológico único como "capa fría confiable".

HBM: El "órgano de ancho de banda" más cercano al cómputo en la cadena de almacenamiento de IA

La Memoria de Alto Ancho de Banda (HBM) no es almacenamiento tradicional, sino una capa de memoria de alto ancho de banda cercana a la GPU. Su misión central no es guardar datos, sino "alimentar" datos de forma continua al poder de cómputo con un ancho de banda extremadamente alto. HBM es el eslabón de la cadena de almacenamiento de IA más cercano al cómputo y de mayor certidumbre, que determina directamente si la GPU puede "alimentarse" adecuadamente, siendo actualmente el principal cuello de botella de la cadena de suministro.

La arquitectura central de HBM es "apilamiento 3D de DRAM + encapsulado avanzado 2.5D": a través del apilamiento vertical TSV y la integración heterogénea CoWoS, comprime al máximo la distancia entre almacenamiento y cómputo, logrando un salto generacional en ancho de banda. Sus barreras industriales no son solo el diseño de DRAM, sino la ingeniería de sistemas que incluye procesos de fabricación de DRAM, TSV, apilamiento ultrafino, encapsulado, disipación térmica, pruebas y certificación del cliente. Cualquier fallo en el rendimiento de cualquier eslabón puede provocar que toda la pila HBM quede inservible.

Actualmente, solo tres gigantes globales pueden producirlos de forma estable: SK hynix, Samsung y Micron, construyendo una triple barrera: procesos de fabricación de DRAM de primer nivel, capacidad de encapsulado y certificación de clientes como NVIDIA/AMD.

DRAM y CXL:Base de memoria del sistema y motor de agrupación de memoria

HBM resuelve el ancho de banda extremo cercano a la GPU, DRAM consolida la base de memoria del sistema del servidor, y CXL intenta romper las fronteras físicas, reestructurando la forma en que se organizan los recursos de memoria en el centro de datos.

• DRAM: Se encarga principalmente de la caché del lado de la CPU, preprocesamiento de datos, almacenamiento temporal de estados intermedios y ejecución del sistema, siendo la capa de memoria del sistema más básica del servidor. El mercado global de DRAM está altamente concentrado en SK hynix, Samsung y Micron; ChangXin Memory (CXMT) es la variable clave para la sustitución nacional de DRAM en China.

• CXL (Compute Express Link): Es un nuevo protocolo de interconexión con coherencia de caché para centros de datos, diseñado para superar las limitaciones de las ranuras DIMM tradicionales, la capacidad de memoria local y los silos de recursos de memoria del servidor, impulsando la evolución de la arquitectura de memoria hacia la expansión, agrupación y compartición. Actualmente, CXL aún se encuentra en una fase temprana, pasando del soporte de plataforma al despliegue a escala, con un valor arquitectónico alto a medio-largo plazo; las empresas clave incluyen a Astera Labs y Montage Technology.

SSD empresarial: El centro de datos construido por NAND, controladores y NVMe

Los SSD empresariales son el incremento principal de almacenamiento persistente de alta velocidad en centros de datos de IA, "alimentando" continuamente datos a la GPU con un rendimiento extremadamente alto, latencia muy baja y QoS estable, abarcando todo el ciclo de vida: carga de datos de entrenamiento, escritura de Checkpoints, recuperación RAG, caché de inferencia y flujo de registros.

En la arquitectura de almacenamiento de IA, el SSD no es un hardware aislado, sino un sistema altamente acoplado, que puede resumirse en la fórmula industrial: SSD empresarial = chips NAND + controlador SSD + vía de datos NVMe/PCIe. Las tres capas representan eslabones independientes de la cadena industrial:

• Chips NAND (Capa de materia prima): Determinan la densidad de almacenamiento y el coste por unidad. Los controladores controlan la liberación del rendimiento y la gestión de la vida útil. Empresas representativas: Samsung, SK hynix (Solidigm), Micron, Kioxia, Western Digital, Yangtze Memory Technologies.

• Controlador SSD (Capa de potenciación del rendimiento): Determina la liberación del rendimiento, corrección de errores de datos, estabilidad del QoS y equilibrio de desgaste. Empresas representativas: Phison, Silicon Motion, Marvell, Maxio.

• NVMe/PCIe (Capa de vía de datos): Determina la eficiencia de transmisión de datos desde el almacenamiento al cálculo. Combinado con la tecnología GPUDirect Storage, reduce el buffer intermedio (bounce buffer) de la memoria de la CPU y la participación de la CPU, aliviando significativamente el cuello de botella de E/S. Empresas representativas: Broadcom, Marvell, Astera Labs.

HDD / Almacenamiento en frío / Archivado: La base de bajo coste del data lake de IA

La IA no eliminará los HDD. Con la creciente demanda de los modelos grandes multimodales de datos de video e imagen, y la expansión exponencial de registros de cumplimiento normativo empresarial y conjuntos de datos históricos, la necesidad de almacenamiento frío de bajo coste está aumentando simultáneamente. En la arquitectura de almacenamiento de IA, SSD y HDD colaboran de forma estratificada según el valor comercial: SSD maneja datos calientes y alto rendimiento, HDD maneja bajo coste y conservación a largo plazo. Empresas representativas: Seagate, Western Digital, Toshiba.

Pila de software de almacenamiento de IA: Centro de planificación de la disponibilidad de datos

Lo que la IA realmente consume nunca son discos desnudos, sino "servicios de datos" organizados de forma precisa por la pila de software. Esta arquitectura transforma el hardware subyacente en activos de conocimiento directamente utilizables por la IA, dividiéndose específicamente en cuatro capas:

• Sistema de almacenamiento de alto rendimiento (Sistema de suministro): Se centra en el rendimiento concurrente y la baja latencia, resolviendo el problema de "hambre de datos" de los clústeres de GPU a través de sistemas de archivos paralelos, garantizando un flujo ultrarrápido para el entrenamiento y la inferencia. Empresas representativas: VAST Data, WEKA, Pure Storage.

• Almacenamiento de objetos (Data lake de datos originales): Se centra en la gestión de Objetos, Claves y Metadatos, alojando datos no estructurados masivos. No busca la latencia ultrabaja, sino que construye una base de capacidad con bajo coste y características nativas de la nube. Empresa representativa: AWS S3.

• Base de datos vectorial (Capa de índice semántico): Es responsable de almacenar, indexar y recuperar vectores generados por modelos de embedding, permitiendo a la IA localizar contenido relevante de forma precisa en un vasto conocimiento. Empresas representativas: Pinecone, Milvus.

• Capa de datos RAG (Capa de invocación de conocimiento): Va más allá de la simple recuperación, abarcando segmentación de datos, limpieza, control de permisos y trazabilidad de referencias, asegurando que los datos empresariales puedan ser invocados por modelos grandes de forma segura, precisa y trazable. Empresa representativa: Databricks.

Del almacenamiento en caliente de IA a la memoria en frío descentralizada: Maximizar la eficiencia vs Maximizar la confianza

El almacenamiento para IA es un sistema impulsado por la eficiencia extrema, cuya función de valor se centra en maximizar la producción de cálculo. El ancho de banda del HBM determina si la GPU puede alimentarse adecuadamente, el rendimiento del SSD determina la eficiencia de lectura/escritura de conjuntos de datos y Checkpoints, y la baja latencia afecta la experiencia en tiempo real de RAG e inferencia. Estos indicadores finalmente convergen en la utilización de la GPU y el coste por Token, determinando directamente el resultado comercial de las aplicaciones de IA. El objetivo final del almacenamiento de IA no es conservar, sino acelerar, y su objeto de servicio es la productividad.

La función de valor del almacenamiento descentralizado es completamente diferente. Pregunta si los datos seguirán existiendo dentro de diez años, si han sido manipulados, si pueden resistir la censura de un punto único. A través de pruebas criptográficas y redes distribuidas, construye una base de datos pública de acceso abierto y conservación permanente. Su objetivo final es defender la verdad absoluta de los datos y la soberanía independiente, sirviendo a la equidad, la necesidad de resistencia a la censura y la memoria de la civilización.

El almacenamiento de IA es "almacenamiento en caliente" que proporciona combustible para la productividad futura, el almacenamiento descentralizado es "memoria en frío" que preserva los registros históricos no eliminables de la civilización humana. El primero sirve a la eficiencia, persiguiendo la velocidad extrema; el segundo sirve a la confianza, defendiendo la memoria silenciosa. El primero determina lo rápido que corre un modelo, el segundo determina si la memoria será eliminada. Actualmente, el mecanismo de mercado premia la eficiencia de la productividad, el almacenamiento de IA está en el centro de atención, mientras que el almacenamiento descentralizado parece estar experimentando un silencio, con su valoración colapsada y su narrativa desangrada.

La visión y la realidad del almacenamiento descentralizado

Existen muchos proyectos de almacenamiento descentralizado, pero según la percepción del sector y la sedimentación del ecosistema, los representantes centrales siguen siendo Filecoin y Arweave. Aunque ambos pertenecen al "almacenamiento descentralizado", su filosofía arquitectónica subyacente sigue caminos casi completamente diferentes: el primero busca aproximarse a la elasticidad de AWS mediante contratos de mercado, el segundo busca aproximarse a la eternidad de una biblioteca mediante un contrato social de pago único.

• Filecoin: A través de PoRep y PoSt ha construido el sistema económico verificable más completo. No debería seguir compitiendo con AWS en almacenamiento en la nube de consumo, sino dirigirse hacia la trazabilidad de datos de IA (Provenance), el alojamiento de conjuntos de datos públicos y el archivado para cumplimiento normativo, proporcionando una cadena verificable para la auditoría de modelos y la prueba de derechos de autor. El camino necesario es encapsularse como una API compatible con S3 y admitir pagos en moneda fiat, actualizándose de un "mercado de almacenamiento barato" a una "infraestructura de cálculo verificable".

• Arweave: Con la narrativa de "pago único, almacenamiento permanente", a través del mecanismo Blockweave y SPoRA, fuerza incentivos para que los mineros conserven y accedan rápidamente a la mayor cantidad posible de datos históricos, especialmente los escasos. Su mejor posición es como base de la memoria pública humana: conservar registros de derechos humanos, pruebas de crímenes de guerra, obras culturales, archivar historial legal y financiero, proporcionando memoria a largo plazo permanentemente accesible para Agentes de IA. El valor de Arweave no está en la velocidad, sino en su capacidad para llevar la memoria de la civilización a través de los ciclos.

La dificultad de proyectos de almacenamiento descentralizado como Filecoin y Arweave no radica en una propuesta de valor errónea, sino en el desajuste a largo plazo entre la productización, la experiencia de recuperación, la demanda real y los incentivos del Token. Esto revela la enorme brecha entre la idea del entusiasta y la aplicación comercial generalizada:

• Desajuste de incentivos de oferta-demanda: Las redes tempranas representadas por Filecoin se expandieron rápidamente mediante Tokens, pero no construyeron una demanda de pago lo suficientemente fuerte, lo que llevó a una gran capacidad pero una utilización y conversión a pago insuficientes. Se recompensa "puedo almacenar", no "necesitan que yo almacene".

• Falta de capacidad de servicio empresarial: La barrera de AWS no son los discos duros, sino el "sistema operativo de datos" compuesto por API, SLA, gestión de permisos, auditoría de cumplimiento y soporte técnico. Las empresas compran "tranquilidad", no infraestructuras experimentales que requieran manejar claves y selección de nodos por sí mismas.

• Debilidad en la experiencia de recuperación: "Guardar" no es igual a "recuperar de forma estable y con baja latencia". Los nodos dispersos, topología compleja, falta de SLA unificado, hacen que sea difícil asumir flujos de trabajo de datos calientes de IA, siendo más adecuado para archivado en frío confiable y trazabilidad de datos.

• Insuficiencia en privacidad y cumplimiento: Los datos privados empresariales no pueden simplemente escribirse en una red pública permanente; el derecho al olvido y la inmutabilidad permanente tienen un conflicto natural. El almacenamiento descentralizado es más adecuado para datos públicos y archivos a largo plazo, no para asumir indiscriminadamente datos privados centrales.

• La economía del Token amplifica el ciclo: La financiarización del mercado alcista enmascara la falta de demanda, la caída del ROI de los mineros en el mercado bajista expone las debilidades de comercialización. El Token puede arrancar en frío la oferta, pero no puede crear automáticamente demanda e ingresos sostenibles.

Otros proyectos de almacenamiento descentralizado se centran principalmente en ecosistemas específicos o nichos de mercado: Storj/Sia tienen una influencia narrativa en Web3 y mentalidad del sector a través de ciclos más débil que Filecoin/Arweave; BNB Greenfield/Walrus están vinculados a ecosistemas de cadenas específicas como BNB o SUI; Celestia/EigenDA pertenecen a la capa de Disponibilidad de Datos (DA), sirviendo para la confirmación de transacciones de Rollup más que para archivado a largo plazo; proyectos con narrativas mixtas IA/DA como 0G intentan integrar almacenamiento, disponibilidad de datos, cómputo y liquidación de agentes de IA en una infraestructura modular nativa para IA, pero su demanda real, adopción por desarrolladores y ciclo comercial cerrado aún deben ser verificados.

Oportunidades futuras del almacenamiento descentralizado: El péndulo a largo plazo entre eficiencia y confianza

En el período de explosión de dividendos tecnológicos, el capital persigue locamente la eficiencia, activos como GPU y HBM reciben primas muy altas, y el almacenamiento descentralizado que defiende la "confianza y equidad" se margina naturalmente. Sin embargo, el péndulo de la historia no se detendrá para siempre en el lado de la eficiencia. Bloqueos irracionales y eliminación de contenido por superplataformas, el estallido de litigios por derechos de autor de IA que exigen pruebas del origen de los datos, conflictos geopolíticos que desatan luchas por la soberanía de datos, la desaparición de archivos públicos debido a monopolios de datos, y la presión de los reguladores sobre la auditoría de cumplimiento de datos de entrenamiento de modelos, etc., podrían preparar la revalorización del "almacenamiento confiable", y las oportunidades futuras del almacenamiento descentralizado aún podrían demostrar su valor único en las siguientes direcciones:

• Procedencia (Provenance) de datos de IA: Construir "pruebas de linaje de datos" combinando pruebas criptográficas, para hacer frente a la presión de reguladores y auditorías.

• Conjuntos de datos públicos y archivos de civilización: Fijar archivos censurados y patrimonio cultural, construyendo una memoria irremplazable e ineliminable.

• Archivado confiable y certificación de cumplimiento: Lograr la autoverificación confiable a través del hash de certificación, proporcionando notarización digital de alto nivel.

• Fusión con tecnologías ZK/TEE/DID: Resolver la tensión de privacidad, actualizar de un simple "protocolo de almacenamiento" a una "infraestructura de datos confiable".

• Ruta de producto invisible: Proporcionar API compatible con S3 y facturación en moneda fiat, permitiendo a los usuarios comprar directamente el servicio de "archivado confiable".

El almacenamiento de IA y el almacenamiento descentralizado: uno persigue la eficiencia extrema, proporcionando el combustible para que corramos hacia el futuro; el otro defiende la memoria silenciosa, protegiendo nuestro derecho a mirar hacia el pasado. Actualmente, el mercado premia sin reservas la eficiencia, por lo que el almacenamiento descentralizado parece silencioso e incluso colapsado; pero cuando la era de la IA amplifique aún más el monopolio de datos, las disputas de derechos de autor y la fragilidad de la memoria histórica, el almacenamiento descentralizado podría recibir una revalorización con la postura de "capa fría confiable". Aquellos recuerdos que no pueden ser fácilmente borrados por plataformas, empresas o cualquier poder único, podrían pasar de ser un romanticismo idealista, de una fe marginal, a convertirse en una infraestructura necesaria.