Högpresterande lagringssystem
| Utvecklare | HPSS Collaboration ( IBM , LANL , LBNL , LLNL , ORNL , SNL ) |
|---|---|
| Stabil frisättning | 9.3 / December 2021 |
| Operativ system | Linux |
| Typ | Hierarkisk lagringshantering |
| Licens | Proprietär |
| Hemsida | hpss-samarbete |
High Performance Storage System ( HPSS ) är en flexibel, skalbar , policybaserad Hierarchical Storage Management- produkt utvecklad av HPSS Collaboration . Den tillhandahåller skalbar [ förtydligande behövs hierarkisk lagringshantering (HSM), arkiv- och filsystemtjänster med hjälp av kluster-, LAN- och SAN -tekniker ] för att samla kapaciteten och prestanda hos många datorer, diskar, disksystem, bandenheter och bandbibliotek.
Arkitektur
HPSS stöder en mängd olika metoder för att komma åt och skapa data. Bland dem finns stöd för FTP , parallell FTP, FUSE (Linux), samt ett robust klient- API med stöd för parallell I/O.
Från och med version 7.5 har HPSS fullt stöd på Linux . HPSS klient- API stöds på AIX , Linux och Solaris .
Implementeringen är uppbyggd kring IBMs Db2 , ett skalbart hanteringssystem för relationsdatabas .
HPSS-samarbetet
Samarbetet som producerade HPSS inleddes hösten 1992 och involverade IBMs Houston Global Services och fem nationella laboratorier från United States Department of Energy ( DOE) ( Lawrence Berkeley , Lawrence Livermore , Los Alamos , Oak Ridge och Sandia ). Vid den tiden insåg det nationella DOE-laboratoriet och IBMs HPSS-designteam att det skulle ske en datalagringsexplosion som drivs av att datorkraften stiger till teraops/petaops, vilket kräver att data lagrade i HSMs stiger till petabyte och däröver, dataöverföringshastigheterna med HSM för att öka till gigabyte/s och högre, och daglig genomströmning med en HSM i 10s terabyte/dag. Därför syftade samarbetet till att designa och distribuera ett system som skulle skalas med en faktor 1 000 eller mer och utvecklas från basen ovan mot dessa förväntade mål och vidare.
HPSS-samarbetet bygger på antagandet att ingen enskild organisation har erfarenheten och resurserna för att möta alla utmaningar som representeras av den växande obalansen mellan datorkraft och datainsamlingskapacitet, och lagringssystem I/O, kapacitet och funktionalitet. Över tjugo organisationer världen över, inklusive industri, US Department of Energy (DOE), andra federala laboratorier, universitet, National Science Foundation (NSF) superdatorcenter, French Commissariat a l'Energie Atomique ( CEA ) och Gleicher Enterprises har bidragit till olika aspekter av denna ansträngning.
Från och med 2022 består det primära HPSS-utvecklingsteamet av:
- IBM Global Business Services ( Houston , TX )
- Los Alamos National Laboratory ( Los Alamos , NM )
- Lawrence Livermore National Laboratory ( Livermore , CA )
- Lawrence Berkeley National Energy Research Scientific Computing Center ( Berkeley , CA )
- Oak Ridge National Laboratory ( Oak Ridge , TN )
- Sandia National Laboratory ( Albuquerque , NM )
Anmärkningsvärda prestationer
- Två av de större HPSS-webbplatserna, ECMWF och UK Met Office , hade 217 och 99 petabyte data lagrade i en enda HPSS-instans och namnutrymme den 7 december 2016.
- Den 14 november 2007 demonstrerade San Diego Supercomputer Center tillsammans med IBM , DataDirect och Brocade ett "Billion File"-test som framgångsrikt säkerhetskopierade en miljard filer från GPFS till HPSS.
- I maj 2013 togs en 380 Petabyte HPSS-installation i bruk vid National Center for Supercomputing Applications (NCSA) vid University of Illinois i Urbana-Champaign .
- ^ a b c "Officiell HPSS-samarbetewebbplats" . IBM.
- ^ "HPSS på LLNL" . LLNL.
- ^ a b Största HPSS-platser 1+ petabyte
- ^ HPCWire 15 november 2007 Arkiverad 17 november 2007 på Wayback Machine
- ^ "NCSA sätter världens största högpresterande lagringssystem i produktion" . 2013-05-30 . Hämtad 2014-08-30 .