Almacenamiento

Almacenamiento de Datos

El servicio de almacenamiento de datos que proporciona el CESGA está orientado al almacenamiento y tratamiento de información de altas prestaciones, grandes volúmenes de datos y de alta disponibilidad y el acceso desde cualquier ordenador conectado a la red Internet.

Atendiendo a estos criterios, realizamos una clasificación de la información disponible e los servidores de cálculo y almacenamiento en 4 tipos:   

• Tipo 1 o SCRATCH: De muy alto rendimiento (muy baja latencia y máximo ancho de banda), puesto que afecta al rendimiento de los sistemas de cálculo del centro, y capacidad media (en función del número de trabajos simultáneos que deba soportar), ya que los datos se almacenan únicamente mientras dure la ejecución de los cálculos. Su disponibilidad puede ser baja (ya que son datos temporales) y no es necesario realizar backups por este mismo motivo.
• Tipo 2 o directorios home: Conteniendo datos susceptibles de ser analizados y modificados en cualquier momento y críticos, ya que de su disponibilidad depende el funcionamiento de los servicios de cálculo del centro. Por tanto deben tener como prioridad la disponibilidad (máxima) y un adecuado balance entre capacidad (media, en función del número de usuarios), y rendimiento (medio), y del cual se realizan backups de forma diaria.
• Tipo 3 o almacenamiento masivo de datos (MSS): utilizados para almacenar bases de datos y resultados de experimentos, normalmente no varían su contenido (suelen ser del tipo WORM) y su velocidad de acceso no suele ser crítica, aunque sí requieren de un elevado ancho de banda de acceso a los servidores, ya que pueden ser el lugar donde se almacenen resultados de experimentos. La realización de los backups puede ser llevada a cabo bajo demanda, debido a que su contenido sólo se modifica esporádicamente. Ejemplos de este tipo de datos son los resultados de la predicción meteorológica diaria o las bases de datos utilizadas en genómica.
• Tipo 4 o backups (internos y externos) a disco: Son copias de datos que los usuarios realizan de sus propios servidores o sus ordenadores personales, en los sistemas de almacenamiento del CESGA, para disponer de una copia de seguridad de sus datos. De este tipo de datos ya no es necesario realizar backups (ellos mismos son “el” backup), la disponibilidad del servicio puede ser baja. El servicio es ofrecido a través de la red (interna o externa) por lo que el tipo de conexión no requiere de un rendimiento alto (el cuello de botella se sitúa en la interconexión del usuario final con el almacenamiento). La capacidad puede ser baja o media, en función del número de usuarios o centros a los que se de servicio.
• Tipo 5 o SCRATCH PARALELO: De muy alto rendimiento (muy baja latencia y máximo ancho de banda), similar al Tipo 1 con el añadido de que los datos scratch se comparten entre todos los nodos del cluster y están repartidos entre ellos, lo que permite aumentar el ancho de banda de acceso a los ficheros y la capacidad total del scratch por encima de la capacidad del disco local. Su disponibilidad puede ser muy baja debido a que depende de muchos componentes que no están redundados y no se realiza backups de estos datos.

Servicios de Almacenamiento del Centro de Supercomputación de Galicia