Pilvipalveluidentarjoajat ovat nykypäivänä paljon vartijana, kun yhä useammat yritykset siirtävät toimintojaan pilveen. Pilvipalvelut ovat kuitenkin alttiita reaalimaailman katastrofeille siinä missä paikallisetkin palvelimet, kuten OVHcloudin asiakkaat saivat huomata.
Yli 1,5 miljoonan asiakkaan OVHcloudin Ranskan itärajan tuntumassa Strasbourgissa sijaitsevassa datakeskuskompleksissa syttyi katastrofaalinen tulipalo. Kompleksissa on toiminnassa neljä datakeskusta, SBG1-4 ja tulipalo sai alkunsa ilmeisesti SBG2:ssa.
Tämän hetkisten tietojen mukaan tulipalo tuhosi täysin SBG2-datakeskuksen ja vahingoitti SBG1- ja SBG3-datakeskuksia. Yhtiön toimitusjohtaja Octave Klaban mukaan SBG3:n kohdalla itse palvelimet säästyivät kuitenkin tuhoilta. Datakeskusten verkkokeskuksenakin toimivan SBG1:n osalta Klaba kertoi itse verkkohuoneen ja kahdeksan palvelinsalin säästyneen, mutta neljä salia tuhoutui.
Yhtiö on kehottanut asiakkaitaan aktivoimaan datanpalutusprotokollansa, jotta ne säästyisivät suuremmilta vahingoilta ja voisivat jatkaa toimintaansa SBG-datakeskuksista riippumatta. Kaikissa tapauksissa erillisiä backup-kopioita ei kuitenkaan ole olemassa, kuten Rust-pelin kehittäjä ja julkaisija Facepunch Studios sai huomata. Yhtiön mukaan se menetti tulipalossa yhteensä 25 Rust-pelin EU-palvelinta. Yhtiöllä on varapalvelimia, jotka on otettu jo käyttöön, mutta kaikki käyttäjien data, mukaan lukien hahmojen eteneminen pelissä, menetettiin seuraavien palvelinten osalta: [EU] Facepunch 3, 4, 5, 11, 12, 13, 14, 17, 18, 19, 20, [EU] Facepunch Large, [EU] Facepunch Small 1, 2, 3, 4, 9, 10, 11, [EU] Softcore Facepunch 1, 2, 3, 4, 5, 6.
Lähteet: ZDNet, Rock Paper Shotgun Uutiskuva: Xavier Garreau @ Twitter
Onko tuo datakeskus ollut kontteihin tehty kyhäelmä? Kuvasta näin äkkiseltään saisi sellaisen kuvan. Tuollaiset konttiratkaisut vaikuttavat melko erikoiselta ratkaisulta, kun miettii minkälaisia datakeskuksia esim. Suomessa on.
Toivottavasti heillä oli varmuuskopiot tallessa jossain pilvipalvelussa (heko heko).
Ylipäätään hyvä herätys niitten backuppien tärkeydestä, varsinkin offsite backupeista. Omaa hölmöyttään luottaa ettei palvelimia hajoa tai saati pala koko saleja.
Ja yleensä datakeskuksia ei sullota täyteen tulen arkaa materiaalia … lähinnä kaapeleiden kuoret ja satunnaiset muoviosat palavat jos oikein yrittää vs. kuvassa näkyvä massiivinen palo joka on paikoin polttanut itsensä konteista läpi.
Olisikohan nuo kontit päätetty lämpöeristää (kesän kuumuudelta) sisäpinnoiltaan polyuretaanilevyillä? Ne palaisivat juurikin kunnon mustalla savulla ja syttyvät melko herkästi (kuten kuorensa sulattaneesta virransyöttö kaapelista). Jos näin, niin saivat mitä tilasivat epäilemälläni materiaali valinnalla.
Offsite backupit on kyllä hyvä olla, mutta joskus se palveluntarjoaja voi niitäkin mainostaa ja mitä se sitten tarkoittaa jos nekin tuossa kärähtää.. Halvalla kun saattaa saada halvat backupitkin
Netistä näitä kun katsoi niin jotain pankkeja, virastoja, useita eri pelipalveluita, yms tuossa ottanut hittiä. Luulisi että näillä olisi varaa vähän tähänkin panostaa, mutta mitäpä sitä maksaa montaa euroa ylimääräistä. Sama tullut nähtyä turhan monesti..
Luulisi herättävän tämänkin ihmisiä, mutta eiköhän tämäkin unohdu hetkessä. Eli mitä tästä opimme? Emme varmaan mitään
Mitä pitäisi oppia? Backupit ja recoveryt, yms. varmasti kunnossa jos ei muuta..
Microsoft Azuressa tieto synkronoidaan kahdelle muulle palvelinkeskukselle automaattisesti, joten tällaista datan katoamista ei siellä voi tapahtua yhden palvelinkeskuksen tulipalon tai muun katastrofin vuoksi.
Omalle koneelle tallentaminen altistaisi kaikenlaisille hakkerointiriskeille. Toki vähintään nyt kerran viikossa luulisi että tuollaisen pelipalvelun tarjoaja ottaisi backupit kaikista palvelimista talteen, mutta ilmeisesti ei.
Tuo noiden kehittämä konttirakenne on nerokas idea saada nopeasti ja helposti.
Silti tuo kyseinen datakeskus ei ollut konttirakennelma. Se oli ihan nortmaali datakeskus. Lisäksi ne alkuperäiset konttirakennelmat taitavat olla jo purettu.
@Sampsa ?
Sampsa ei ehdi vastaamaan. On juuri päivittämässä servereitä…
Ite en ainakakaan oo löytäny mitään listaa. Taitaa olla palvelujen oman tiedotuksen varassa. Tilannetta mutkistaa se että ne palvelimet mitkä ei tuhoutunut on pois päältä, kaikki ei välttämättä tiedä onko tiedot palaneella palvelimella vai sellaisella mikä ei ole päällä.
Eikös valtio takaa johonkin 100k asti rahat?
Viesti oli siis raikulle…
LinkedIn siirrettiin Azureen pari vuotta sitten, en muista missä oli sitä ennen.
Juuri hetki sitten näytti taas toimivan mutta vähän aikaa sitten oli vielä aivan sekaisin koko sivusto.
Toisekseen kenen vastuulla nuo backupit on olleet? Ymmärrän pilvipalvelun juuri siten että vastuu olisi palveluntarjoajalla.
OVH on ihan tavallinen konesalitarjoaja, vaikka laittoivatkin vastikään tuon -cloud liitteen nimensä perään. Ovat Euroopan suurin dedikoituja palvelimia tarjoava firma, ja tuolla palaneessakin salissa todennäköisesti vain murto-osa oli mitään "pilvipalvelimia".
Eiköhän se ole sopimuskysymys. Jos sopimuksessa todetaan, että backupit eivät kuulu hintaan, niin sitten ne eivät kuulu.
Kiitos. Tämä toki selittää. Heillä oli ”perinteisiä” asiakkaita tuolla…
Datakeskuksen suurpalon syy taisi paljastua – laitteita käytiin huoltamassa hieman ennen paloa
http://www.tivi.fi
Ilmeisesti siellä on UPSeja päivitelty ja yksi niistä olisi sitten kärähtänyt.
Ei ole ilmeisesti kovin vanha rakennus ja toi konttisysteemi näyttää joltain tilapäiseltä setiltä tai varastolta tms. Mutta anyway, joku automaattinen sammutusjärjestelmä olis kyllä ollut kova.
Sinänsä hieman yllättävää, ettei sammutusjärjestelmä hanskannut hommaa.
Jos tuolla oli kerran läpökamerat (fiksu veto), niin niistä kyllä saa hälytyksen. Ja eiköhän (ainankin luulisi) tuolla ollut myös savua tunnistavat anturit..
Minusta uutisissa puhuttiin nimenomaan palokunnan lämpökamerasta eli palokunta olisi katsonut lämpöjen perusteella upsin olevan syypää. En ole nähnyt missään mainintaa että palvelinsalissa olisi ollut omia lämpökameroita.
Konesalien automaattiset sammutusjärjestelmät eivät ole tarkoitettu palvelimien vaan ihmishenkien pelastamiseen.
Varmistin tämän oman firman konesalivastaavalta.
Miksi konesaleissa on sammutusjärjestelmä, jonka laukeaminen tuhoaa palvelimet? Konesaliyrittäjä vastaa
http://www.tivi.fi
Konesalien automaattiset sammutusjärjestelmät eivät ole tarkoitettu palvelimien vaan ihmishenkien pelastamiseen.
Varmistin tämän oman firman konesalivastaavalta.
Miksi konesaleissa on sammutusjärjestelmä, jonka laukeaminen tuhoaa palvelimet? Konesaliyrittäjä vastaa
http://www.tivi.fi
[/QUOTE]
Mitä, onko leffojen halonisammuttimet pelkkää urbaanilegendaa?
Ei. Esimerkiksi valtamerilaivoissa ihan arkipäivää konehuoneessa mutta nykyään enemmän käytetään hiilidioksidia mutta joissain todella harvinaisissa tapauksissa käytetään vielä halonia.
1997 poistettu käytöstä halonit ainakin suomessa.
Muita korvaavia kaasuja on ja sitten toinen vaihtoehto on erittäin hienojakoinen vesisumu mitä käytetään paljon myös
Tuhoavat siis otsonikerrosta aika tehokkaasti, niin siksi kielletty.
3 §
Halonit
Halonien käyttö tuotteiden ja laitteiden valmistukseen sekä niitä sisältävien tuotteiden ja laitteiden markkinoille luovuttaminen on kielletty.
Käsisammuttimet ja siirrettävät alkusammutuslaitteet eivät saa sisältää haloneita. Halonit tulee poistaa käytössä olevista kiinteistä sammutuslaitoksista 1 päivään tammikuuta 2000 mennessä.
Käytössä olevien kiinteiden sammutuslaitteistojen toimivuutta ei saa kokeilla siten, että haloneita pääsee ilmaan.
Edellä 1 ja 2 momenteissa tarkoitetut kiellot ja rajoitukset eivät kuitenkaan koske
1) sellaisia käsisammuttimia eivätkä sellaisia kiinteitä sammutuslaitoksia, joita käytetään ilma-aluksissa ja vedenalaisissa aluksissa;
2) palolaitosten alkusammutukseen käyttämiä, henkilöturvallisuuden takaamiseksi välttämättömiä käsisammuttimia; sekä
3) halonien käyttöä maan hallinnon johtamisen ja turvallisuuden kannalta välttämättömissä, miehitetyissä johto-, viesti- ja tietokonekeskuksissa eikä puolustusvoimien miehitetyissä viesti- ja johtokeskuksissa, taisteluajoneuvoissa ja -aluksissa.
Epäilin eilen teoston poikia kun muutaman trackerin sivut katosivat.
lisää vaan ulkoistus ja pilvipaskaa firmoihin sekä omat serverit ajetaan siinä sivussa alas ja ylläpito ulkoistetaan. Sitten käy lopulta näin. AI niin mutta kun on niin helppoa ja kätevää, turvallisuudesta ja katastrofeista viis.
Oliskos ollut argon?
Syrjäyttää hapen ja sitä käytetään.
Millä perusteella näin ei voisi käydä vaikka niille firman tiloissa oleville palvelimille?
Pilvi on parasta mitä IT-infrassa on tapahtunut vuosiin. Sen ansiosta ollaan kovaa vauhtia pääsemässä eroon erillisistä palvelimista, olkoot ne fyysisiä tai virtuaalisia. Näin paranee suorituskyky, tietoturva, saatavuus, varmistettavan datan määrä jne jne.
Datakeskuksiin varmaan laitetaan sellaiset kaapelit, tai ainakin pitäisi laittaa, jotka eivät levitä paloa ja sammuvat itsekseen. Kysyntää on varmasti kaikkien kaapeleiden osalta. Kaikki salin materiaalit ja sammutusjärjestelmät on myös valittava huolellisesti. Voi olla, että on vääriä materiaaleja valittu ja sammutusjärjestelmät ovat olleet puutteelliset.
Inergen sisältää argonia, typpeä ja hiilidioksidia ja jättää tilaan sen verran ilmaa, jotta tilassa voi lyhytaikaisesti olla. Nykyään käytetään paljon myös hiilidioksidisammutuslaitteistoja ja co2-järjestelmällä varustetuissa tiloissa on tilan ulkopuolella kytkin, josta ko. tilan sammutusjärjestelmän saa kytkettyä pois, jotta ei tule ruumiita, mikäli järjestelmä sattuu laukeamaan.
Uutisen firma taisi olla serverifarmi, joten tuskin oli ajanut omia severeitä alas, päinvastoin.
Varavoiman huollot kannattaa ulkoistaa alan osaajille, se ei ole selvinnyt mikä meni pieleen siinä.
Jos tässä nyt hyppäsit johonkin PK firmaan, niin omien palvelimien ylläpito on vaativaa ja noin yleistän kannattaa ulkoistaa. Se onko tarve pitää omissa tiloissa, on sitten ihan siitä riippumaton asia.
Ihan suma kuka tekee niin yleisymmärrys kannattaa olla.
Jos taasen oli vain tarkitus purkaa jonkin omakohtaisen ulkoistusprojektin kohtaloa, niin ehkä väärä ketju.