Almacenamiento en frío se encuentra con Big Data: Ejecución de análisis de bajo costo en una nube privada
El almacenamiento en frío es un término para datos a los que se accede con poca frecuencia pero que son necesarios. Aprenda cómo funciona el almacenamiento en frío y cómo puede ayudar con big data.
Las empresas han estado prestando mucha atención a los algoritmos de almacenamiento en niveles que enrutan los datos al medio de almacenamiento más adecuado en función de la frecuencia con la que se debe acceder, con un enfoque particular en el primer nivel, la recuperación de almacenamiento de acceso más rápido para los datos que necesitan para ser accedido rápida y frecuentemente.
Pero volviendo a la «mazmorra de datos», donde hasta el 85 % de los datos empresariales residen en un almacenamiento al que rara vez se accede, una crisis igualmente inminente es cómo administrar y mantener de manera óptima estos datos al menor costo con el almacenamiento, la recuperación, la seguridad y el acceso adecuados. las políticas están en su lugar.
El nombre de estos datos a los que se accede con poca frecuencia pero que aún son necesarios es «almacenamiento en frío». Determinar si los datos son «calientes» (con acceso frecuente), «tibios» (con acceso moderado) o «fríos» (con acceso poco frecuente) suele ser tarea de los administradores de almacenamiento, quienes evalúan cuánto tiempo ha pasado desde que se recopilaron varias categorías de datos. accedido visitado. En algunos casos, los centros de datos incluso comienzan a utilizar software de almacenamiento en niveles automatizado para tomar estas decisiones de almacenamiento de datos.
Big data es un factor a discutir porque hay mucho de eso. Para fines de gobernanza (los datos deben conservarse incluso si se usan con poca frecuencia), la continuidad del negocio (big data y los datos «regulares» requieren múltiples repositorios de datos para la conmutación por error de recuperación ante desastres) y cordura general debido a la necesidad de saber dónde está todo. Sitios deben buscar almacenamiento en frío más lento y de bajo costo para que puedan administrar de manera asequible estos datos a los que rara vez se accede.
Jeff Flowers, fundador y director ejecutivo del proveedor de servicios de datos en frío Storant, dijo: «Al investigar el mercado, reconocimos la necesidad de almacenamiento en frío de grandes datos y descubrimos que la salida de todos los grandes datos acumulados por la organización era un problema creciente. .” para entornos de nube privada.
Flowers y Storant dicen que pueden mantener los datos de forma segura detrás del firewall por tan solo $ 0,01 por gigabyte por mes. Los grandes proveedores de servicios de nube pública como Amazon también brindan servicios de almacenamiento en frío, pero la diferencia es que Storant se entrega a las empresas para su uso en nubes privadas empresariales; esto atrae a muchas empresas que desconfían de usar servicios de nube pública para sus datos.
Cómo funciona el almacenamiento en frío y cómo puede ayudar con big data
«Los grandes datos vienen en grandes porciones, y el análisis de grandes datos a menudo se requiere para procesar grandes objetos de datos en el rango de terabytes», dijo Flowers. «Con el almacenamiento en frío, nos convertimos en un ‘lago de datos’ de almacenamiento masivo que los nodos de cómputo de Hadoop pueden escanear».
Las soluciones como Storant contienen objetos de big data, que contienen los datos no estructurados típicos de la mayoría de los big data y, cada vez más, datos de Internet de las cosas (IoT), como archivos de registro de sitios web. Cuando la TI empresarial utiliza soluciones de almacenamiento en frío y decide qué contenedores de almacenamiento clasificará bloques (u objetos) de datos grandes específicos, las empresas pueden clasificar y clasificar todos estos datos. Al mismo tiempo, se pueden asignar permisos a cada contenedor para determinar quién tiene acceso a los datos del contenedor.
Los proveedores de servicios de Internet se están moviendo rápidamente para implementar este enfoque basado en la nube para el almacenamiento en frío de grandes datos debido a su elasticidad para expandirse o contraerse según sea necesario, dijo Flowers. El almacenamiento en frío basado en la nube también es financieramente flexible, ya que elimina la necesidad de gastos de capital del centro de datos (CAPEX) amortizados a largo plazo, lo que favorece una transición más flexible a un enfoque de gastos operativos de pago por uso (OPEX) para el almacenamiento en frío. Las empresas pueden controlar a corto plazo.
«Creemos que el Internet de las cosas continuará aumentando exponencialmente la cantidad de big data que las empresas necesitan administrar, con millones de dispositivos y fuentes de datos de todo el mundo que proporcionan cantidades masivas de big data», dijo Flowers. «Las instituciones financieras, las compañías farmacéuticas y los gobiernos ya requieren almacenamiento en frío de big data a gran escala y bajo costo. Finalmente, las empresas tendrán que encontrar una manera de ejecutar análisis de bajo costo de manera segura y confiable, y servicios de almacenamiento en frío en la nube privada». proporcionan los entornos en este punto».
