Redundanssi: monialueinen varajärjestelmä
Miten hajautetut pilvitallennusalustat saavuttavat yksitoista yhdeksikköä (99.999999999 %) tietojen kestävyydessä matemaattisen pyyhkimiskoodauksen ja mantereiden välisen maantieteellisen osioinnin avulla.
1. Yksitoista yhdeksikköä kestävyyden matematiikka
Tietojen kestävyys on perustavanlaatuisesti eri asia kuin alustan käytettävyys. Järjestelmässä voi olla hetkellinen verkkokatko, vaikka tietojen eheys säilyy 100 %:n varmuudella. Kestävyys mittaa vuosittaista todennäköisyyttä, että yksittäinen tallennettu tavu tuhoutuu peruuttamattomasti laitteiston rappeutumisen, kosmisten säteiden aiheuttamien bittivirheiden tai tallennusklusterin katastrofaalisen vikaantumisen vuoksi.
Yksitoista yhdeksikköä kestävyystakuulla, jos tallennat pilvivarastoon 10 000 000 erillistä objektia, tilastollisesti odotettavissa oleva menetys on yksi objekti kerran 10 000 vuodessa.
2. Reed-Solomon-pyyhkimiskoodaus vs. perinteinen RAID
Perinteiset RAID-taulukot peilaavat koko levyt tai laskevat yksinkertaisia pariteettilohkoja. Hyperskaalaympäristöissä, joissa tallennetaan petatavuja jäsentämätöntä dataa, usean teratavun levyjen uudelleenrakennus voi kuitenkin kestää päiviä. Tämä luo kriittisen ikkunan, jossa toinen levyvika tuhoaa taulukon pysyvästi.
Pilvijärjestelmät kiertävät tämän haavoittuvuuden käyttämällä Reed-Solomon 8+4 tai 16+4 pyyhkimiskoodausta. Jokainen hyötykuorma jaetaan $K$ datapalaan ja koodataan matemaattisesti $M$ pariteettipalaan. Niin kauan kuin mitkä tahansa $K$ palaa säilyvät klusterissa, alkuperäinen objekti voidaan rakentaa välittömästi uudelleen muistissa.
Muuttumaton WORM-tallennus: haittaohjelmien neutralointi
Write-Once-Read-Many (WORM) -objektilukitus pakottaa muuttumattoman säilytyskäytännön fyysisen tallennusohjaimen tasolla. Vaikka hyökkääjä saisi root-tunnukset tai asentaisi haittaohjelman, joka salaa paikalliset päätelaitteesi, pilviarkisto hylkää poisto- ja uudelleenkirjoituskomennot, kunnes ennalta määrätty vaatimustenmukaisuuden ajastin päättyy.
3. Kylmäarkiston hakuviiveluokat
Toiminnallisten kustannusten ja hakusaatavuuden tasapainottaminen on kriittistä massiivisia tietoaineistoja arkistoitaessa. Testimme arvioivat kolmea erillistä tallennusluokkaa:
- Kuuma taso (välitön): Nolla hakuviivettä, optimoitu päivittäisiin synkronointitoimintoihin, hinta $5.00–$8.00 per TB kuukaudessa.
- Viileä taso (Nearline): 10–60 sekunnin käynnistysaika, sopii viikoittaisiin varmuuskopioihin ja katastrofipalautuksen peileihin, hinta noin $2.50 per TB kuukaudessa.
- Kylmä arkisto (Glacier / Deep Tape): 3–12 tunnin vaiheistettu hakuputki, ihanteellinen vaatimustenmukaisuusvarastoihin ja historiallisiin materiaaleihin, keskimäärin $1.00–$1.20 per TB kuukaudessa.