El mayor sistema de almacenamiento de datos científicos del mundo no se halla en la borgeana Biblioteca de Babel sino en el Sistema de Almacenamiento de Alto Rendimiento del Laboratorio Nacional Lawrence Berkeley donde se almacena una copia de seguridad, un backup de datos de genética, química, biotecnología... Actualmente, el HPSS acumula 59.000 de estos ladrillos(*). Cada uno de ellos tiene una capacidad de entre 75 y 1.000 GB de capacidad, lo que supone que contienen 66 millones de archivos. Es decir, en el HPSS hallaréis 3,9 petabytes.
#4:
El HPSS (High Performance Storage System) es un sistema de almacenamiento jerárquico. Esto quiere decir que va moviendo los datos entre distintos niveles de almacenamiento (discos duros rápidos, discos duros más lentos, cintas magnéticas). Los datos que se usan más se mantienen en los discos locales de los servidores, si va pasando el tiempo y no se usan se pasan a discos más o menos rápidos en cabinas de almacenamiento, y cuando llevan mucho tiempo sin usarse se pasan a cintas en una librería automatizada.
Hay varias organizaciones que utilizan HPSS, entre las que se encuentra el Laboratorio Lawrence Berkeley, el de Los Alamos, etc...
En la imagen del post de genciencia lo que se aprecia es el brazo robótico de la librería de cintas.
#10:
Que le dicen 1023 teras a 1 tera?
- unete anda, que nos hacemos un peta!!
#6:
Todavía queda mucho espacio libre: los responsables del centro garantizan que el HPSS puede llegar a atesorar hasta 37 petabytes (el equivalente a la capacidad de almacenamiento de 321.900 reproductores iPod Classic).
El HPSS (High Performance Storage System) es un sistema de almacenamiento jerárquico. Esto quiere decir que va moviendo los datos entre distintos niveles de almacenamiento (discos duros rápidos, discos duros más lentos, cintas magnéticas). Los datos que se usan más se mantienen en los discos locales de los servidores, si va pasando el tiempo y no se usan se pasan a discos más o menos rápidos en cabinas de almacenamiento, y cuando llevan mucho tiempo sin usarse se pasan a cintas en una librería automatizada.
Hay varias organizaciones que utilizan HPSS, entre las que se encuentra el Laboratorio Lawrence Berkeley, el de Los Alamos, etc...
En la imagen del post de genciencia lo que se aprecia es el brazo robótico de la librería de cintas.
En él no hay libros ni bibliotecarios (anque sí largas estanterías) sino un brazo robot que, a velocidad de vértigo, localiza en 30 segundos cualquier dato científico, lo atrapa con sus pinzas y lo pone a disposición del usuario. Porque la información que se guarda en el HPSS desde su fundación está en formato digital, dentro de las entrañas de discos compactos con forma de ladrillo.
#22 El funcionamiento no es exactamente el de una caché, más bien al revés.
El funcionamiento de una caché se basa en mover los datos más usados y dejarlos en un sitio más cercano y rápido. En este caso es al revés, no se mueven los datos más usados, sino que justamente los que se mueven son los menos usados. En el disco del servidor se queda una especie de fichero enlace, lo que hace que el servidor piense que los sigue teniendo en local, cuando en realidad se han movido.
Y bueno, esto es en principio el funcionamiento del HSM (Hierarchical Storage Manager), en el cual se han basado para construir el HPSS, pero es posible que haya cosas que no sean iguales, así que me puedo estar equivocando.
#24 bueno, en una cache, los datos más usados son los que se quedan en la cache, y los demás pasan a la memoria principal, y de esta al disco duro, realmente sí es como una caché.
La caché lo que hace es cargar los datos requeridos por el procesador por bloques, el HPSS digamos que pilla uno de los ficheros poco usados que se encuentra en los discos almacenados y lo carga en el servidor, lo que vendría a ser un fallo de cache...
Bueno, no me hagas mucho caso porque el tema de cachés no lo tengo claro y me lío bastante, ahí tienes mi positivo por la respuesta
Creo recordar que en una de las últimas actualizaciones a MareNostrum, con motivo del LHC, se añadió otra biblioteca robotica de almacenamiento de 6 Petabytes... Estoy intentando encontrar la noticia...
Todavía queda mucho espacio libre: los responsables del centro garantizan que el HPSS puede llegar a atesorar hasta 37 petabytes (el equivalente a la capacidad de almacenamiento de 321.900 reproductores iPod Classic).
#6 y #18 eso iba a decir yo, ¿realmente era necesaria esa comparación?, ayer leí una noticia donde se media el peso de los móviles antiguos en bebés de un año: "el primer móvil que fabricó nokia pesaba lo mismo que un bebé estándar de un año". Habría que hacer una tabla de equivalencias porque a saber cuanto pesa un "bebé estándar".
(*) La información que se guarda en el HPSS desde su fundación está en formato digital, dentro de las entrañas de discos compactos con forma de ladrillo.
3,9 petabytes no es nada del otro mundo hoy en día. Seguro que en 1998 sería la hostia pero creo que el almacenamiento ha avanzado una magnitud en estos 11 años. Ahora me asombraría si tuvieran 3,9 exabytes
Comentarios
El HPSS (High Performance Storage System) es un sistema de almacenamiento jerárquico. Esto quiere decir que va moviendo los datos entre distintos niveles de almacenamiento (discos duros rápidos, discos duros más lentos, cintas magnéticas). Los datos que se usan más se mantienen en los discos locales de los servidores, si va pasando el tiempo y no se usan se pasan a discos más o menos rápidos en cabinas de almacenamiento, y cuando llevan mucho tiempo sin usarse se pasan a cintas en una librería automatizada.
Hay varias organizaciones que utilizan HPSS, entre las que se encuentra el Laboratorio Lawrence Berkeley, el de Los Alamos, etc...
En la imagen del post de genciencia lo que se aprecia es el brazo robótico de la librería de cintas.
Más información del HPSS: http://www.hpss-collaboration.org/hpss/index.jsp
(*) No son discos compactos con forma de ladrillo, sino cintas magnéticas.
En él no hay libros ni bibliotecarios (anque sí largas estanterías) sino un brazo robot que, a velocidad de vértigo, localiza en 30 segundos cualquier dato científico, lo atrapa con sus pinzas y lo pone a disposición del usuario. Porque la información que se guarda en el HPSS desde su fundación está en formato digital, dentro de las entrañas de discos compactos con forma de ladrillo.
Parece sacado de una novela de Asimov...
#4 Gracias
#4 o sea, ese sistema está actuando como una memoria caché a lo bestia, ¿no?
#22 El funcionamiento no es exactamente el de una caché, más bien al revés.
El funcionamiento de una caché se basa en mover los datos más usados y dejarlos en un sitio más cercano y rápido. En este caso es al revés, no se mueven los datos más usados, sino que justamente los que se mueven son los menos usados. En el disco del servidor se queda una especie de fichero enlace, lo que hace que el servidor piense que los sigue teniendo en local, cuando en realidad se han movido.
Y bueno, esto es en principio el funcionamiento del HSM (Hierarchical Storage Manager), en el cual se han basado para construir el HPSS, pero es posible que haya cosas que no sean iguales, así que me puedo estar equivocando.
#24 bueno, en una cache, los datos más usados son los que se quedan en la cache, y los demás pasan a la memoria principal, y de esta al disco duro, realmente sí es como una caché.
La caché lo que hace es cargar los datos requeridos por el procesador por bloques, el HPSS digamos que pilla uno de los ficheros poco usados que se encuentra en los discos almacenados y lo carga en el servidor, lo que vendría a ser un fallo de cache...
Bueno, no me hagas mucho caso porque el tema de cachés no lo tengo claro y me lío bastante, ahí tienes mi positivo por la respuesta
Que le dicen 1023 teras a 1 tera?
- unete anda, que nos hacemos un peta!!
#10
Creo recordar que en una de las últimas actualizaciones a MareNostrum, con motivo del LHC, se añadió otra biblioteca robotica de almacenamiento de 6 Petabytes... Estoy intentando encontrar la noticia...
el chiste muy bueno, #10, pero sería con 999 mas 1, ¿ya se te ha olvidado cuando compraste el ultimo disco duro?
(yo tengo reciente la conversion GB 1000 / GiB 1024, que acabo de comprar uno mecachis...
#20 http://es.wikipedia.org/wiki/Petabyte me temo que es al revés.
#10 comentario Dupe
enorme-disco-duro-autonoma-barcelona-petabyte-millon-gigabytes/0009
Un enorme ‘disco duro' en la Autónoma de Barcelona...
adn.eslinux-gestiona-15-petabytes-gran-colisionador-hadrones/00017
Linux gestiona 15 Petabytes del Gran Colisionador ...
incubaweb.comTodavía queda mucho espacio libre: los responsables del centro garantizan que el HPSS puede llegar a atesorar hasta 37 petabytes (el equivalente a la capacidad de almacenamiento de 321.900 reproductores iPod Classic).
Me lo traduce a Ronaldos, por favor?
#6 Uf, tío, eres un intelectual... yo como no sea en campos de fútbol no me cosco
#6 y #18 eso iba a decir yo, ¿realmente era necesaria esa comparación?, ayer leí una noticia donde se media el peso de los móviles antiguos en bebés de un año: "el primer móvil que fabricó nokia pesaba lo mismo que un bebé estándar de un año". Habría que hacer una tabla de equivalencias porque a saber cuanto pesa un "bebé estándar".
Eh, ¡quiero uno de esos para mi pornoteca!
(*) La información que se guarda en el HPSS desde su fundación está en formato digital, dentro de las entrañas de discos compactos con forma de ladrillo.
Un tesoro lucrativo para sociedades que hubieran optado por la ciencia como derecho de autor (siendo de esta forma las copias ilegales).
Es una "muy buena" organización sobre I+D. Y una buena iniciativa a seguir con una meta común "avances"
Los petabytes explotan cuando te los metes en la boca.
Podian poner una en mi curro que estoy hasta el gorro de cambiar 6 cintas todos los dias.
"Este moderno sistema de almacenamiento de archivos se instaló en 1998"
Algo falla
(el equivalente a la capacidad de almacenamiento de 321.900 reproductores iPod Classic)- A mi en cristianoronaldos hoygaaaa!!!
3,9 petabytes no es nada del otro mundo hoy en día. Seguro que en 1998 sería la hostia pero creo que el almacenamiento ha avanzado una magnitud en estos 11 años. Ahora me asombraría si tuvieran 3,9 exabytes
pssss naaaaaaaahh... a ver cuando llegan a mi capacidad
Uhmm, Petabytes...
#5 Google procesa sobre 20 petabytes de datos cada día, Facebook tiene 60 mil millones de imágenes, lo que suponen 1,5 petabytes de almacenamiento.
#5 Estos no se fuman ehh??
Que te veooo manos quietas!!!