OVHcloudin Strasbourgin datakeskuksissa katastrofaalinen tulipalo

[pekka666]

Pilvi on parasta mitä IT-infrassa on tapahtunut vuosiin.

Miten sen ottaa. Kustannustehokasta se ainakin on, mutta toisaalta johtaa pitkällä tähtäimellä siihen että vähän turhan paljon pyörii muutaman Amazonin ja Microsoftin kaltaisin jättiläisfirman varassa.

 

[yero]

LinkedIn siirrettiin Azureen pari vuotta sitten, en muista missä oli sitä ennen.

Aika luonnollista, että on Azuressa, Microsoft kun osti LinkedInin

Miten sen ottaa. Kustannustehokasta se ainakin on, mutta toisaalta johtaa pitkällä tähtäimellä siihen että vähän turhan paljon pyörii muutaman Amazonin ja Microsoftin kaltaisin jättiläisfirman varassa.

Kustannustehokas on vähän niin ja näin, ei ne ihan halpojakaan ole, kyllä se tarkkaa rätinkiä vaatii.

 

[pekka666]

Kustannustehokas on vähän niin ja näin, ei ne ihan halpojakaan ole, kyllä se tarkkaa rätinkiä vaatii.

Riippuu niin paljon kyseessä olevista tarpeista, että ei tuohon voi oikein sanoa mitään yleispätevää sääntöä. Ehkä se suurin säästö noissa pilvipalveluissa tulee siitä, että infraa voidaan tarvittaessa skaalata helposti ylöspäin jolloin tarvittava alkuinvestointi jää paljon pienemmäksi.

 

[caden]

Inergen sisältää argonia, typpeä ja hiilidioksidia ja jättää tilaan sen verran ilmaa, jotta tilassa voi lyhytaikaisesti olla. Nykyään käytetään paljon myös hiilidioksidisammutuslaitteistoja ja co2-järjestelmällä varustetuissa tiloissa on tilan ulkopuolella kytkin, josta ko. tilan sammutusjärjestelmän saa kytkettyä pois, jotta ei tule ruumiita, mikäli järjestelmä sattuu laukeamaan.

Juurikin näin. Itse pyörin paikassa missä useampi pienempi konesali. Parissa co2 laitteistot jotka tulee kytkeä pois päältä jos tilaan astelee. Mikäli sammutusjärjestelmä laukeaa, käynnistyy myös äänekäs halytys ja tilasta on (muistaakseni 20-30 sek) aikaa poistua ennen kuin happi syrjäytetään. Järjestelmät testataan hälytysten osalta kerran kuussa.

Joissakin saleilssa sitten perinteisempää tiheää vesisumua joka käsittääkseni toimii osittain kohdennettuna (kohdennuksesta ei tarkkaa tietoa) eli ei mene koko sali jos yksi kaappi sattuu ottamaan astetta kovempaa lämpöä..

 

[Obi-Lan]

Kansainvälisen konesalitoimittajan tiloissa välillä ramppaan; siellä on palo-ovet joka välissä, hissikuilu on tyhjiössä ja joku hapenpoistojärjestelmä joka tilassa. Jos pitää ovea yli minuutin auki tulee vartija heti paikalle katsomaan jne.

Vastakohta pilvipalvelu on ollut kirjaimellisesti siivouskomerossa, jonka ikkunaa pitää pitää kesällä auki, jotta jäähdytys riittää.

 

[Griffin]

Minusta uutisissa puhuttiin nimenomaan palokunnan lämpökamerasta eli palokunta olisi katsonut lämpöjen perusteella upsin olevan syypää. En ole nähnyt missään mainintaa että palvelinsalissa olisi ollut omia lämpökameroita.

JOS palokunta olisi ollut paikalla kameran kanssa katsomassa: "HEi, tuollahan työntää yksi UPSI liekkiä rankasti", niin tuskimpa olisi tuo laitos palanut.
Noita lämpökameroita on ihan valvontajärjestelmissä kyllä. Ovat melko käteviä, huomaa esim, jos jostain laitteesta pettää tuuletin ja laite siksi lämpenee enemmän, mutta toimii vielä..

Sitä hieman ihmettelen, että miksi UPS järjestelmä oli paikassa, josta tuli pääsee leviämään minnekään kriittiseen paikkaan, kuten konesaliin? Upsit voitaisiin ihanhyvin laittaa omaan palo-osastoituun osastoonsa..

 

[prc]

Saisin taas lukea artikkelin kokonaan, mutta Rustin datat tosiaan meni tässä rytäkässä. Tietenkin ei voi pelinkehittäjä välttämättä varautua siihen , että datakeskus palaa.

Voi varautua. Tosin vaatii vähän hommia perinteisessä konesali ympäristössä kun ei ole oikea pilvi kyseessä. Eli otetaan backup tilaa / serverit useammasta salista ja ajellaan ne backupit sinne. Rust on vetänyt tossa siitä missä hinta on matalin. OVH:lta voi osaa palveluita/rautaa eri saleista ja siten päättää minne mitäkin ajetaan.

Toki jos tuollainen pipertely tulee mieleen, kannattaa miettiä onko turaaminen järkevää vai ottaisiko vaikka joltain cloudstorage tarjoajalta sen backup alustan. Mikään ei pakota toimimaan yhden pilven/salitarjoajan varassa.

 

[Obi-Lan]

Se tuli mieleen, että jos siellä on sattunut olemaan li-ion akkuja upseissa niin sitähän paloa ei vedellä taida pystyä edes sammuttamaan. Toki niiden pitäisi olla omassa kontissaan 100m päästä palvelimista tms.

 

[Griffin]

Se tuli mieleen, että jos siellä on sattunut olemaan li-ion akkuja upseissa niin sitähän paloa ei vedellä taida pystyä edes sammuttamaan. Toki niiden pitäisi olla omassa kontissaan 100m päästä palvelimista tms.

Viimeviikolla tilasin viimeksi 1200W:n räkkiupsin, lyijyhyytelö akut (ihan ne perinteiset siinä oli).. Onko upseja olemassa Li Ion pommeilla? Kun Li akut eivät oikein edes tykkää käsittääksini käytöstä, jossa ne ovat miltei aina täysin täyteen ladattu. Lyijyakut taas toisinpäin..

 

[Obi-Lan]

Viimeviikolla tilasin viimeksi 1200W:n räkkiupsin, lyijyhyytelö akut (ihan ne perinteiset siinä oli).. Onko upseja olemassa Li Ion pommeilla? Kun Li akut eivät oikein edes tykkää käsittääksini käytöstä, jossa ne ovat miltei aina täysin täyteen ladattu. Lyijyakut taas toisinpäin..

APC:lta saa (jenkkisivut mutta saa Suomesta):

Smart-UPS - APC USA

 

[escalibur]

Riippuu niin paljon kyseessä olevista tarpeista, että ei tuohon voi oikein sanoa mitään yleispätevää sääntöä. Ehkä se suurin säästö noissa pilvipalveluissa tulee siitä, että infraa voidaan tarvittaessa skaalata helposti ylöspäin jolloin tarvittava alkuinvestointi jää paljon pienemmäksi.

Voi siinä tulla suuria säästöjä jo pelkästään lisenssimaksuistakin. Esim. On-premi Sharepoint sis Windowsit, SQL, varmistukset, virustrojunnan, yms. Lisäksi olisihan se kivaa jos se olisi kahdennettu ympäristö -> lisää kuluja, eikä tämä sisällä edes hostaus- ja / tai ylläpitokustannuksia vs. Sharepoint Online.

 

[Dudem]

Tulikin näistä sammutusjärjestelmistä mieleen tuo 3M:n Novec, jota nestettä (litrahinta taisi olla aika överi) Der8auer on käyttänyt muutamassa jäähdytys prototyypissä. En ainakaan huomannut että tästä olisi mainittu?


On kyllä yritys penniä venyttänyt oikeissa paikoissa kun tuommoinen kunnon tulipalo pääsi syntymään sekä tuo varmuuskopioiden puutos. No pennillä saa pennin tuotteen.

 

[pulatunnus]

JOS palokunta olisi ollut paikalla kameran kanssa katsomassa: "HEi, tuollahan työntää yksi UPSI liekkiä rankasti", niin tuskimpa olisi tuo laitos palanut.

Ei annettu ymmärtää että olisivat ollee katsomassa tuossa vaiheessa. Vaan siinä vaiheessa kun olivat hälyn takia saapuneet paikalle. Sitäkään ei selvinnyt missä vaiheessa lämpökamerakuvauksia tehneet, heti tullessa vai myöhemmin.

Mutta ei tuo välttämättä tarkka uutisointi, ja en se poissuljettuettä siellä voinut ollut kameravalvontaa jossa myös lämpökamera ominaisuuksia, voi se upsien lämpötila tai palon alkujakin valvoa, vaikka luulisi että niissä ensisijaisesti ihan omat kunnon seuranta systeemit. Toki ainahan on voitu säästää....

 

[pulatunnus]

On kyllä yritys penniä venyttänyt oikeissa paikoissa kun tuommoinen kunnon tulipalo pääsi syntymään sekä tuo varmuuskopioiden puutos. No pennillä saa pennin tuotteen.

Ketjussa toisteltu että firma ihan perinteinen konesalitarjoaja, ja rauta tarjoaja, ei se silloin puutu asiakkaiden tallentamaan dataan ja ei oikein voisikaan.

 

[prc]

Ketjussa toisteltu että firma ihan perinteinen konesalitarjoaja, ja rauta tarjoaja, ei se silloin puutu asiakkaiden tallentamaan dataan ja ei oikein voisikaan.

Ja kyllä ihan oikeastakin pilvestä saa palveluita ilman backuppia jos niistä ei halua maksaa. Ihan normaali käytäntö jossain devi ympäristössä, jossa sillä datalla ei ole merkitystä kun se voidaan generoida aina uusiksi tietokantaan.

Ja monesti joku testisetti olettaa aloittavansa tyhjällä tietokannalla tai tyhjentää annetun kannan heti ensitöikseen.

Samaten on-demand dev/test pannuilla ei välttämättä ole minkäänlaista persistent storagea, koska kamat tiputetaan reposta ja tuikataan lokaaliin dockeriin (tai natiivisti) päivän turailuiden ajaksi, kun vm:n ajaa alas kaikki levyillä olleet datat/muutokset katoaa. Eli kyllä siellä on "oikeata" levyä takana, mutta voidaan tehdä niin että se toimii kuin tmp. Turha maksaa persistent storagesta jollain devi pytyllä, jos se oikeasti ei tarvitse kun "temppiä" päivän tunaroinnin ajaksi.

Turha tuossa on palveluntarjoajaa kenenkään syytellä, ihan on facepunch studiosin oma moka jos Rust:n dadat katosi pelaajilta osittain tai kokonaan.

 

[Dudem]

Ketjussa toisteltu että firma ihan perinteinen konesalitarjoaja, ja rauta tarjoaja, ei se silloin puutu asiakkaiden tallentamaan dataan ja ei oikein voisikaan.

Varmaan siihen tulipalon estoon olisi kuitenkin kannattanut panostaa?