NAS rakentelut

[dun]

En ole tuota itse tehnyt, mutta nopea guuglailu väittää, että 1080p pitäisi onnistua useimmilla prossuilla, ja tehokkaalla prossulla myös 4k... Joten en ehkä hankkisi näyttistä vain sitä varten NAS-boksiin.

Musta tuo on jo melko iso määrä tavaraa kiinni. Esim. omassa NAS-boksissa on vain käyttistä varten SSD, ja viiden levyn raidz1 jossa kaikki data on...

Niin no, kaikki on suhteellista. Itse ajan plexiä ilman gpu:ta ja ei ongelmaa. 5 x Video: hevc (Main 10), yuv420p10le(tv, bt2020nc/bt2020/smpte2084), 3840x2160 [SAR 1:1 DAR 16:9], 59.94 fps, 59.94 tbr, 1k tbn, 59.94 tbc (default), bitrate: 85890 kb/s => 1080p 24fps. Jos pistää 6:n videon päälle, niin kaikki alkaa paukkua. Sama tapahtuu jos on 480p videokuvaa menossa. Joku rajoitus serveripään softasta että ei anna kuin 5 streamia. Prossu on melkein passiivi 50W model name : AMD EPYC 3251 8-Core Processor.

Edellinen prossa oli i3-4130T, se takkusi jo parilla 1080p videolla jos piti transkoodata. Jos player osasi toistaa suoraan, niin sitten ei mitään hätää tietenkään. Emo+prossu kombo ei lopulta ollut edes hirveän kallis, about sama kuin 2015 tuo i3-4130T + asrock server mini-itx emo + 8gb ddr3 ecc muisti. Onneksi tuli kilpailua ja amd niin raudan hinta romahti.

 

[Sakkez]

Osat saapuivat kiinasta ja sain jopa tietokoneen postamaan. Nyt kuitenkin aloin vielä miettiä tuota unRaidia käyttöjärjestelmänä. Suurena miinuksena on levyjen lukunopeudet, sekä tietysti hinta. Katsoin myös FreeNasia, mutta sen käyttömahdollisuudet on kuitenkin rajattu, koska virtualisointia ei suositella. Onko täällä jollain kokemusta ihan Linux pohjaisten käyttiksien käytöstä NAS ja muussa serverikäytössä?

Haluaisin siis serverin kykenevän toimimaan perus NASsina, mutta sen lisäksi myös esimerkiksi pyörittämään CS Go-peliserveriä. Tämä ei oikein onnistu FreeNasin avulla ja UnRaidissakin vain virtualisoinnin kautta, joka ei varmaankaan ole niin hyvä kuin natiivina ajaminen. Törmäsin kuitenkin Amahiin, joka on käsittääkseni normaali Fedora, mutta siinä on lisänä tuollainen graafinen käyttöliittymä?

 

[Joku_242]

Itse olen käyttänyt ihan vain Ubuntu serveriä omassa NAS-boksissa, vähemmän yllättäen aikalailla kaikki mahdolliset kikkulat mitä on tarvinnut on löytynyt tuolle käyttikselle, ja aivan hyvin on toiminut. Graafista webbihallintakikkaretta ei tosin ole, mutta eipä tämä haittaa mitään jos komentorivi ei pelota.

Peliserveriä en tosin ole pitänyt.

 

[iccb]

Openmediavault on debianin päälle tehty ”nas-käyttis”. Ts. saat vakaan debianin pohjalle ja siistin selaimella käytettävän hallinan.
Mikään ei varmasti estä asentamasta graafista ympäristöä ja siihen steamia myöskään. Itsellä ei graafisesta puolesta kokemusta.

 

[Sakkez]

Openmediavault on debianin päälle tehty ”nas-käyttis”. Ts. saat vakaan debianin pohjalle ja siistin selaimella käytettävän hallinan.
Mikään ei varmasti estä asentamasta graafista ympäristöä ja siihen steamia myöskään. Itsellä ei graafisesta puolesta kokemusta.

Ahaa, tämä ei kunnolla selvinnyt kun tätäkin vaihtoehtoa tutkin. Tätä juuri hain että voisin laajentaa NASini käytettävyyttä linuxiin asennettavilla ohjelmilla taustalla. Cs-serverin saa siis asennettua vain komentoriviltä, joten perinteistä GUI:ta linuxiin en tarvitse, jos vain komentorivi toimii normaalisti.

 

[iccb]

Ahaa, tämä ei kunnolla selvinnyt kun tätäkin vaihtoehtoa tutkin. Tätä juuri hain että voisin laajentaa NASini käytettävyyttä linuxiin asennettavilla ohjelmilla taustalla. Cs-serverin saa siis asennettua vain komentoriviltä, joten perinteistä GUI:ta linuxiin en tarvitse, jos vain komentorivi toimii normaalisti.

Ah, luin huonosti, tarkoititkin cs:n servua. Openmediavaultissa, tosiaan debian ja pääset komentoriville ssh:n avulla tai kirjautumalla suoraan koneeseen.

 

[Markok]

Itse olen käyttänyt ihan vain Ubuntu serveriä omassa NAS-boksissa, vähemmän yllättäen aikalailla kaikki mahdolliset kikkulat mitä on tarvinnut on löytynyt tuolle käyttikselle, ja aivan hyvin on toiminut. Graafista webbihallintakikkaretta ei tosin ole, mutta eipä tämä haittaa mitään jos komentorivi ei pelota.

Peliserveriä en tosin ole pitänyt.

Webmin korjaa tämän puutteen

 

[HeadCase]

Itsellä ollut pitkään to-do listalla tuo siirtyminen RaidZ1 pakoista RaidZ2 pakkoihin... tänään homma nytkähti asteen eteenpäin kun amazon.de laittoi 8TB WD My Bookin 139€ hintaan (144€ suomiveroilla). Kolme pysty yhdellä kertaa tilaamaan eikä nyt budjetttikaan olisi enempiä sallinut. 3*4TB WD Green levyistä koostuva raidz1 pakka puretaan ja levyt pääsee noiden kaveriksi raidz2 pakaksi. Kun persus kestää otetaan toinen 3kpl nippu noita 8TB levyjä ja vapautetaan 4TB lätyt.
Pisimpään tuli mietittyä tässä että meneekö RaidZ2 aikaan 6, 8 vai 10 levyn paketilla. Hieman tuo 6 levyn huono "hyötysuhde" häiritsee. Etuina taas että vähemmän levyjä uusittavaksi jos kasvattaa... Pari muuta 4TB levyä tuossa olisi irroittaa eli katsotaan muuttuuko mieli 8levyn vaihtoehtoon amazonin toimituksen aikana.

 

[timop]

mite ne nuo "ei nas käyttöön" levyt on toimineet? wd green siis.
ite hommasin WD Red levyjä raid z1 pakkaan (3kpl 1Tb levyä) joskus 5vuotta sitten heti alkuun yksi kilahti ja tilasin jo varalle yhden kun se lähti vaihtoon. sen jälkeen olivat noin reilu nelisen vuotta.
viime syksynä lisäsin yhden levyn ja rakensin poolin uusiksi kun tila kävi vähiin. jätin kuitenkin raid z1 vielä koska ei tuohon hp gen8 saa enempää järkevästi levyjä. noinkin on pärjännyt.
käytössä nas4free/xigmanas ja scrup 2kertaa/kk.

 

[Yeenoghu]

mite ne nuo "ei nas käyttöön" levyt on toimineet? wd green siis.
ite hommasin WD Red levyjä raid z1 pakkaan (3kpl 1Tb levyä) joskus 5vuotta sitten heti alkuun yksi kilahti ja tilasin jo varalle yhden kun se lähti vaihtoon. sen jälkeen olivat noin reilu nelisen vuotta.
viime syksynä lisäsin yhden levyn ja rakensin poolin uusiksi kun tila kävi vähiin. jätin kuitenkin raid z1 vielä koska ei tuohon hp gen8 saa enempää järkevästi levyjä. noinkin on pärjännyt.
käytössä nas4free/xigmanas ja scrup 2kertaa/kk.

Mahtavalla kahden levyn otannalla vikaantumisprosenttini WD Green levyjen osalta nassikäytössä on 50%. Molemmista oli poistettu torkkuminen WDIDLE3:lla - jos tuolla oli nyt mitään merkitystä.

Muokataan tähän vielä että vuosien varrella nasseissani on pyörinyt toistakymmentä erilaista levyä eri valmistajilta ja eri kokoluokassa ja tuo WD Green on ainoa hajonnut. Tai, no kyllä se vielä jotenkin toimii, mutta vikaantuneita blokkeja tuli liikaa ja raidipakka hylkäsi levyn.

 

[Joku_242]

Mulla on tällä hetkellä lauennut NAS-käytössä yksi WD:n musta kaviaari, tosin ne olivatkin kuusi vuotta ajossa...

Nyt WD:n punaisilla on menossa kolmas vuosi ilman failureita.

 

[timop]

sillä tässä vähän kyseli arvaako muita kun Redejä miettiä edes. Kapasiteettia nyt ei ehkei tarvitse enempää kuin tuo 2Tb kun ei enää töllöstäkään mitään tallennettavaa tule mikä kuluttaisi levyä.
parit bluet on hyllyssä varalevynä jos oikein pamahtaa pskaksi.
ja tärkeimmistä tulee rsyncattua backupit varanassille.

 

[HeadCase]

mite ne nuo "ei nas käyttöön" levyt on toimineet? wd green siis.
ite hommasin WD Red levyjä raid z1 pakkaan (3kpl 1Tb levyä) joskus 5vuotta sitten heti alkuun yksi kilahti ja tilasin jo varalle yhden kun se lähti vaihtoon. sen jälkeen olivat noin reilu nelisen vuotta.
viime syksynä lisäsin yhden levyn ja rakensin poolin uusiksi kun tila kävi vähiin. jätin kuitenkin raid z1 vielä koska ei tuohon hp gen8 saa enempää järkevästi levyjä. noinkin on pärjännyt.
käytössä nas4free/xigmanas ja scrup 2kertaa/kk.

Heti alkuun muokkasin wdidle3.exellä sen idle timerin maksimi aikaan. Itsellä NAS aina päällä, mutta levyjä käytetään suhteellisen harvoin. Siksi myös kiistanalainen spin down aktivoitu 30min vai oliko 60min käyttämättömyyden jälkeen. Käyttötuntilaskuri vaikuttaa laskevan vaikka levyt ei pyöri.
Oli ihan tarkistettava kuiteista ja nyt iski kauhu.. nuo Greenit on vuodelta 2014. Hyvään kestoon pidän selityksenä spindown ominaisuutta nassin puolelta, todelliset pyörimistunnit siis varmaan maltilliset. Lisäksi kotelo hyvin tuulettuva ja hukkalämmön hyödyntämiseksi on varastotilassa, jossa kesällä maks.22 astetta ja syksy-kevät välillä noin 14-16 astetta.

Itsellä ainoa hajonnut levy oli nassiin nuukuuksissani laittama 3tb seagate barracuda, joka jäi desktop käytöstä pois. Ostin sille kaveriksi 2kpl 3tb seagaten nas levyt 2016 tammikuussa. Barracuda lakkasi tunnistumasta kesäloman jälkeisessä nassin käynnistyksessä (oli sammutettuna kun oltiin pois kotoa pidempään). Tilalle tuli 4tb seagate nas levy. Tämä pakka edelleen ajossa.

2016 lopussa tuli ostettua vielä WD storesta 3kpl 3TB ulkoisia recertified levyjä, jotka purin koteloistaan. Olivat ns. white label levyjä, mutta wdidle3 muokkauksen vaativat... nämä kaikki 3kpl myös edelleen ajossa.

Jokaiselle vdeville scrub 30pv välein. Bootille 7pv välein.

 

[Sakkez]

Onko nuo kaikki HBA-kortit pcie x8 -väylälle? Vapaan emossa enää x4 paikka, ellei sitten ota näyttistä pois. Näyttikselle ei sinänsä pitäisi olla muuta tarvetta, kun että pääsee servuun kiinni jos SSH ei jostain syystä toimisi. Eli mitä HBA-korttia suottelette, joka toimisi tuossa x4-väylässä?

 

[jultsu]

x8 tai x16 liittimen omaava kortti toimii kyllä x1 tai x4 väylässäkin ihan ok. Riippuu sitten levyistä ja raid-tasosta että minkälaisia nopeuksia sieltä saa (eli jääkö se x4 liitin pullonkaulaksi vai ei) mutta joo, vastatakseni kysymykseen, on noita HBA-kortteja sekä x4 että x8 liittimillä.

 

[Joku_242]

Lähinnä x8-kortin laittamisessa x4-paikkaan on kai se ongelma, ettei se välttämättä fyysisesti mene sinne.

 

[Sakkez]

Mitä jos ostan näyttikselle riserin ja laitan sen joko tuohon x4 tai x1 paikkaan kiinni. Sitten jäisi vapaaksi hba-kortille tuo x16 paikka vapaaksi. Toimiikohan tuo näyttis tuossa paikassa siinä määrin mitä minä tarvitsen? Kortti on joku ikivanha radeon joka ei tarvitse lisävirtaa.

 

[Grazer]

Lähinnä x8-kortin laittamisessa x4-paikkaan on kai se ongelma, ettei se välttämättä fyysisesti mene sinne.

Voihan kortin liittimeen viilata kolon siihen kohtaan, mikä osuu x4-liittimen päätyyn. Tai vaihtoehtoisesti vetää slotin pää auki. Toki jos takuunalaisista komponenteista kyse, niin ehkä ei halua.

Itse aikoinani yhteen koneeseen laitoin kakkosnäyttiksen tuolla tavalla x1-liittimeen. Näyttis oli x16-kortti. Viilalla kolo sopivaan kohtaan ja tuossa kyseisessä tapauksessa piti pcie-väylän 1A- ja 17B-pinnien välille juottaa hyppylanka, jotta emo tunnisti "lyhentyneen" kortin.

Upgrading videocard. Using a diamond cutting wheel. : Svarichevsky Mikhail

3.14.by

 

[jultsu]

Toki voisi myös esittää kysymyksen että montako SAS 6GB/s porttia tuosta kortista pitäisi löytyä? Sisäisiä vai ulkoisia? Onko liittimellä väliä? (SFF-8087 vai jokin muu?)

 

[Joku_242]

Toki voisi myös esittää kysymyksen että montako SAS 6GB/s porttia tuosta kortista pitäisi löytyä? Sisäisiä vai ulkoisia? Onko liittimellä väliä? (SFF-8087 vai jokin muu?)

Tietty 8 porttia sisältävät ovat sen verran halpoja, että luultavasti ei kannata ostaa neljän portin korttia...

 

[jultsu]

Tietty 8 porttia sisältävät ovat sen verran halpoja, että luultavasti ei kannata ostaa neljän portin korttia...

16 portin kortitkaan ei paljoa maksa, mutta niissä on sitten käytännössä kaikissa x8 väylä.

 

[Joku_242]

16 portin kortitkaan ei paljoa maksa, mutta niissä on sitten käytännössä kaikissa x8 väylä.

Nopealla guuglailulla 16-porttiset näyttäisivät maksavan luokkaa satasen, kun kahdeksanporttisen saa alle 20 eurolla. Ei tuo ole enää sellainen hintaero, että sitä maksaa ihan vaan varmuuden vuoksi.

Joku taisi tosin täällä sanoa, että niissä halvemmissa 8-porttisissa oli jotain ongelmia PCIe 3.0 -väylän kanssa, mutta omalla Supermicro X9SCi-LN4F -emolla ja lainassa olleella E3-1225 v2 -prossulla (oman prossun tulossa Kiinasta kesti sen verran aikaa, että lainasin kaverilta prossua testailua varten) en muutaman viikon aikana moista huomannut. Ehkä se sitten oli emokohtaista.

 

[jultsu]

Ulkoisilla SFF-8088 liittimillä varustettu 16-porttinen kortti 50 dollaria: LSI 9201-16E 6G 16-lane external SAS HBA FW:P20 IT Mode ZFS FreeNAS unRAID NoROM | eBay

 

[Joku_242]

Ulkoisilla SFF-8088 liittimillä varustettu 16-porttinen kortti 50 dollaria: LSI 9201-16E 6G 16-lane external SAS HBA FW:P20 IT Mode ZFS FreeNAS unRAID NoROM | eBay

Kappas, tietty nuo ulkoiset liittimet ovat vähän hankalampia kuin sisäiset...

 

[jultsu]

Juu, riippuu toki käyttötarkoituksesta että kumpi parempi. Ebaystä löytää toki myös noita SFF-8088 -> 4x SATA kaapeleitakin parilla dollarilla, mutta johdot pitää sitten tuoda ulkokautta takaisin sisälle jos levyt on samassa paikassa kuin emo.

 

[Sakkez]

Sisäisiä liittimiä, 4 levyä olisi hyvä ainakin saada kiinni. Vaatiiko tuo nyt sitten yhden SAS-liittimen? Liittimellä ei varmaankaan väliä kunhan saa adapterin SATA-levyille.

 

[jultsu]

Käytännössä tällöin tuo SFF-8087 on se yleisin ja paras vaihtoehto. Kortilla sitten mieluusti LSI2008 piirisarja, noita löytyy jokaisesta niemennotkosta.

 

[iccb]

Käytännössä tällöin tuo SFF-8087 on se yleisin ja paras vaihtoehto. Kortilla sitten mieluusti LSI2008 piirisarja, noita löytyy jokaisesta niemennotkosta.

Äkkiseltään ebay.de tarjoaa Kiinamalleja 30-40€:n hintaan. Onko noi luotettavia, vai mistä noita kannattaisi hankkia?

 

[jultsu]

Ebay ja kiinasta, mutta tunnetun valmistajan kortti (LSI, Dell, IBM jne)

esim. tässä malli joka mulla toiminut luotettavasti jo useamman vuoden: Dell PERC h200 8 Port 6gb/s ADAPTER SAS SATA Controller Card = LSI 9211-8i 47mcv | eBay

 

[HeadCase]

Dellin adapteri vaatii hieman enemmän firmware puukotusta kuin LSI. Ainakin jos opasvideoihin uskominen. Toki ebaystä löytää molempia valmiiksi IT 20 firmiksellä.. Eikä se itse laitettunakaan vaikea ole...

 

[Joku_242]

Dellin adapteri vaatii hieman enemmän firmware puukotusta kuin LSI. Ainakin jos opasvideoihin uskominen. Toki ebaystä löytää molempia valmiiksi IT 20 firmiksellä.. Eikä se itse laitettunakaan vaikea ole...

Itse puukotin IBM ServeRaid M1015:een sen firmiksen, eikä se tosiaan mikään kummoinen homma ollut. Lähinnä jotkut ohjeet oli tehty BIOS-emoille, eikä UEFI-emoille, mikä aiheutti pientä säätöä. Mutta tuolla ohjeella muistaakseni meni ihan hyvin:

Flash IBM ServeRAID M1015 to LSI9211-8i with UEFI mainboard

0x00.to - The binary NULL blog -

www.0x00.to

 

[Richard]

Hävyttömästi vinkkaan että täältä löytyy mahtava startteri NASille, muistien hinnalla (64 GB ECC UDIMM) melkein lähtee koko setti, Myydään - Xeon 1275v5, 64 GB ECC, MSI WS C236A

Tuo pyöritti NASia (8x8 TB WD Red, M1015 tjs geneerinen LSI) ongelmitta ja vieläpä virtuaali-Windowsia ja macOS:ää siinä päällä, tuli vain nälkä useammalle corelle.

Nyt tilalla on v3 Xeon-pari ja 128 GB. Lähti vähän lapasesta.

 

[Carlos]

Tuli tuossa fläshättyä dell perc h200 it modeen. Vähän tuossa oli netissä hämmentäviä ohjeita, mutta lopulta nyt sain tuon flashin tehtyä. Outoa nyt on, että kone ei enää anna näyttöön kuvaa prossuun integroidulla näyttiksellä. Kone kyllä toimii ihan hyvin, eli siis vaikka kuvaa ei tule, niin boottaa freenassiin ilman ongelmia ja levyt näkyvät siellä. Alustana siis Z77/2600k.

Updated: SAS HBA crossflashing or flashing to IT mode, Dell Perc H200 and H310

Default firmware for this guide is: 2118it.bin Version 20.00.07.00 Release date: 11-FEB-16 WARNING: If you have an Integrated, Mini or Mini Mono Perc H310 do NOT try to crossflash with these steps.…

techmattr.wordpress.com

Ton avulla tein.

Omat epäilyt on, että jotenkin UEFI nyt solmussa ja varmaan pitäisi BIOS resetoida, ei vaan jaksa purkaa tota kun toimii siinä käytössä missä nyt on

Pääsi samalla tutustumaan poolin siirtoon. Ihan kivuttomasti meni, ensin export, levyjen siirto emon porteista SAS korttiin, import ja voila, kaikki toimii jakoja myöten eikä mitään tarvinnut konffaa uusiksi.

 

[HeadCase]

Tuli tuossa fläshättyä dell perc h200 it modeen. Vähän tuossa oli netissä hämmentäviä ohjeita, mutta lopulta nyt sain tuon flashin tehtyä. Outoa nyt on, että kone ei enää anna näyttöön kuvaa prossuun integroidulla näyttiksellä. Kone kyllä toimii ihan hyvin, eli siis vaikka kuvaa ei tule, niin boottaa freenassiin ilman ongelmia ja levyt näkyvät siellä. Alustana siis Z77/2600k.

Updated: SAS HBA crossflashing or flashing to IT mode, Dell Perc H200 and H310

Default firmware for this guide is: 2118it.bin Version 20.00.07.00 Release date: 11-FEB-16 WARNING: If you have an Integrated, Mini or Mini Mono Perc H310 do NOT try to crossflash with these steps.…

techmattr.wordpress.com

Ton avulla tein.

Omat epäilyt on, että jotenkin UEFI nyt solmussa ja varmaan pitäisi BIOS resetoida, ei vaan jaksa purkaa tota kun toimii siinä käytössä missä nyt on

Pääsi samalla tutustumaan poolin siirtoon. Ihan kivuttomasti meni, ensin export, levyjen siirto emon porteista SAS korttiin, import ja voila, kaikki toimii jakoja myöten eikä mitään tarvinnut konffaa uusiksi.

Oliko Export edes tarpeellinen. Itsellä tosiaan Supermicron emo, jossa integroituna tuo LSI ohjain. Ainakin levyjen vaihto tuos SAS sisällä eri portteihin ei vaikuta mitään. Tullut muutaman kerran irroitettua sata piuhat ja laitettua randomilla takaisin...ei vaikutusta freenas toimintaan. Muistelen siirtäneeni myös intel piirisarjan sata porteista tuohon LSI SAS ohjaimeen levyt ja sekin meni suoraan, mutta tämä on vain muistikuva.

Asiasta toiseen, itse en ole Dellin kortin kanssa pelannut, mutta sitä suunnitellessa katselin tämän

 

[andyks]

Ymmärtääkseni FreeNAS luo ZFS poolit levyistä "by-id" joten levyjen siirtelyllä porteista toiseen ei pitäisi olla mitään merkitystä. Eli export on turha jos levyt jäävät samaan koneeseen ja samaan FreeNAS installaatioon.

Tuli itsekin tuossa taannoin tuollainen Dell H310 fläshättyä IT-modeen. Hieman oli vaikeuksia saada sitä DOSissa toimimaan, mutta UEFIssa onnistui. Ohjeet joiden mukaan tein löytynee pdf:nä jostain poolin uumenista. Jos jollain tarvetta niin voin laittaa vaikka yv:llä.

 

[timop]

joskus virtuaalissa testasin xigmanas asennuksen kolmen levyn raidz1 poolilla. uusi freenas asennus xigmanasin päälle. levyjen importtaus ja toimi.
toki varmaan järkevä tehdä käyttiksen vaihto tapauksessa exporttaus.

 

[HekaDesimaali]

ei enää anna näyttöön kuvaa prossuun integroidulla näyttiksellä

Dell 200 ja 310 korteilla pitäisi eristää tai katkaista nuo foliot, niin ei sekoita biossia päällekäisillä osoitteilla.

 

[Carlos]

Dell 200 ja 310 korteilla pitäisi eristää tai katkaista nuo foliot, niin ei sekoita biossia päällekäisillä osoitteilla.

Ymmärsin, että tuo pitäisi tehdä vaan 310:llä.

 

[andyks]

joskus virtuaalissa testasin xigmanas asennuksen kolmen levyn raidz1 poolilla. uusi freenas asennus xigmanasin päälle. levyjen importtaus ja toimi.
toki varmaan järkevä tehdä käyttiksen vaihto tapauksessa exporttaus.

Olen itseasiassa itsekin käytännössä aina unohtanut tehdä tuon exportin ja aina importannut -f (force) parametrilla. Mitään ongelmia ei ole ollut.
Ainoa ongelma importissa tullut vastaan kun yritin Linuxilla tehtyä zpoolia importata FreeNASiin. Tämä ei onnistu. ZFSonLinuxissa on käytössä attribuutteja joita BSD:stä ei löydy. Importtaus onnistuu ainoastaan Read-only tilassa.

Ymmärsin, että tuo pitäisi tehdä vaan 310:llä.

Itsellä ei kyllä H310 vaatinut moisia temppuja.

 

[HekaDesimaali]

Leikkaamalla PCIe-väylät B5 ja B6 poista SMBusin käytöstä kortilla. Tämä poistaa myös ohjaimen SAS-osoitteen. Tällä tavalla kortti ei näy BIOS-tarkistusten aikana, eikä sitä voida käyttää käynnistykseen. Emon bios -versiosta riippuen, voi leikkaamaton kortti sekoittaa biossin vga -osoitteen tai estää osan asennetusta ram -muistista toimimasta. Ongelmaa ei synny palvelinemoilla vaan paremminkin työasemaemoilla. ;-)

 

[Osjur]

Itse olen nyt testaillut mdraidia, zfs:ää, unraidia jne...
Olen tullut siihen tulokseen että kotikäyttöön itselle on 2 vaihtoehtoa, joko ZFS tai Unraid (tai Snapraid esim. Openmediavaultilla mikäli haluaa säätää ja nuukailla...)

Unraid mikäli data ei ole kovinkaan tärkeää ja haluaa vain mahdollisimman paljon halpaa levytilaa.
+ voi käyttää vaikka 10:1 pariteettia jos on pokkaa
+ voi milloin vain lisätä levyjä heikentämällä vikasietoisuutta
+ useamman levyn rikkoutuessa häviää vain ko. levyillä oleva data
- hidas, vaikka käyttäisi cachea. Cache auttaa käytännössä vain kirjoitusnopeuteen.

ZFS mikäli data on tärkeämpää ja haluaa nopeutta sekä muut ZFS:n hyödyt
+ Snapshotit lennossa
+ datan pakkaus lennossa käytännössä kuormittamatta CPU:ta
+ mirroroidessa kirjoitusnopeus ei kärsi lainkaan
+ mirroroidessa lukunopeus ~tuplaantuu
+ luku- ja kirjoitusnopeutta saa lisää lisäämällä vdevejä lisää
+ cachella saa oikeasti nopeushyödyn
+- levytilaa saa lisää helpohkosti lisäämällä vdevejä
- samaan vdeviin ei saa lisättyjä levyjä
- kaikki data on mennyttä jos saman vdevin kaikki (2kpl mirrorissa) levyt hajoavat yhtäaikaa
- UPS pitkälti pakollinen jotta välttyy datalossilta sähkökatkojen yhteydessä edit: eipä taida tosiaan nykyään enää olla normaalia isompaa riskiä

Näistä vaihtoehdoista itselle ZFS on aika selkeä valinta.
Kun tottuu siihen että virtuaalikoneiden imageista on automaattiset snapshotit 15min välein viimeiseltä parilta viikolta (harventuen toki loppua kohti) ja omista tärkeistä valokuvista yms. tiedostoista snapshotit konffattuna 10vuoden ajalle, on aika vaikeaa kuvitella enää elämää ilman.
Lisäksi se että käytännössä tämän päivän HDD:llä jo kahdella vdevillä pääsee ~300Mt/s kirjoitusnopeuksiin ja ~600Mt/s lukunopeuksiin on aika luksusta verrattuna Unraidin ~60-80Mt/s kirjoitusnopeuteen.
Eikä itsellä oikein olisi uskallusta kuin max. 3 levyn raidz1:een, joten näen mirrorissa saavutetun nopeusedun suuremmaksi kuin raidz1:llä saavutetun kustannusedun. Raidz pariteetin laskenta syö yllättävästi sekä cpu:ta että levyn nopeutta.

En vieläkään ymmärrä miten Unraid, tai oikeastaan Snapraid koska Unraid on vaan imo paska siihen verrattuna, olisi muka ns huonompi tärkeän datan säilyttämiseen vs ZFS. Itse en uskaltaisi käyttää ZFS kuin maks 3 levyn raidz1 per vdev enään. Pari pakkaa on hajonnut tässä 15v aikana: "rauta" raid5 failas kun tler iski kesken rebuildin ja heitti levyn poolista, ja 4 levyn raidz1 poksahti ku hajos eka yks levy ja alle päivän sisään toinen (kovot samaa batchia). Onneksi kummassakaan tapauksessa en mitään oikeasti tärkeetä menettänyt kun oli myös backupit datasta ulkoisella kovolla. Näiden jälkeen ei enää oikeen napannut noi real-time raid ratkaisut.

Nykyään on mun Windows serverissä 9 levyn raid6 Snapraid pakka ja Drivepool+Scanner käytössä jonka olen scriptannut toimimaan niin että automaattisesti smart chk-> file chk -> sync -> scrub joka yö ja abort + ilmoitus pushpullettiin jos ongelma tai liikaa filuja muuttunut. Lisäksi kaikki tärkee data mikä pooliin menee, duplikoituu kansiokohtaisesti kaikille data levyille. Scanner nuuskii SMART ja evakuoi levyn jos havaitsee ongelman. Tällä setupilla pitää hajota kaikki levyt samaan aikaan että menetän kaiken datan ja jos huono tuuri käy että 3+ hajoo ennen evakuointia niin menee se data vain sitten niiltä hajonneilta levyiltä. Ainoat huonot puolet setupissa on kirjoitusnopeus joka on maks levyn nopeus, lukunopeus jos ei ole data duplikoitu, snapshotin tekeminen jos data muuttuu paljon syncin aikana ja se alun helv... säätäminen että saa hommat toimimaan. Yksi datalevy on ns. "hajonnut" tämän aikana jolloin tuli todettua setupin toimivuus.

Samaan pääsee ZFS 2-levyn mirror vdev ja siihen päälle kansiokohtainen duplikointi vdeveille mutta tämä syö sitten levytilaa oikein urakalla.

 

[timop]

Niino eikai se 3 levyn raidz1 kään kestä kahden levyn hajoamista. Tein eilen vielä uuden virtualisen testi asennuksen xigmanas 4 levyn raidz1 käyttis levy uusiksi freenas ja levyt sisään ja pelaa. Ilman exportteja sekä uusimmat versiot.
Testailtua jos vaihtaisi tuon oman xigmanassin freenassii tai true kunhan se ilmestyy.

 

[dun]

En vieläkään ymmärrä miten Unraid, tai oikeastaan Snapraid koska Unraid on vaan imo paska siihen verrattuna, olisi muka ns huonompi tärkeän datan säilyttämiseen vs ZFS. Itse en uskaltaisi käyttää ZFS kuin maks 3 levyn raidz1 per vdev enään. Pari pakkaa on hajonnut tässä 15v aikana: "rauta" raid5 failas kun tler iski kesken rebuildin ja heitti levyn poolista, ja 4 levyn raidz1 poksahti ku hajos eka yks levy ja alle päivän sisään toinen (kovot samaa batchia). Onneksi kummassakaan tapauksessa en mitään oikeasti tärkeetä menettänyt kun oli myös backupit datasta ulkoisella kovolla. Näiden jälkeen ei enää oikeen napannut noi real-time raid ratkaisut.

Nykyään on mun Windows serverissä 9 levyn raid6 Snapraid pakka ja Drivepool+Scanner käytössä jonka olen scriptannut toimimaan niin että automaattisesti smart chk-> file chk -> sync -> scrub joka yö ja abort + ilmoitus pushpullettiin jos ongelma tai liikaa filuja muuttunut. Lisäksi kaikki tärkee data mikä pooliin menee, duplikoituu kansiokohtaisesti kaikille data levyille. Scanner nuuskii SMART ja evakuoi levyn jos havaitsee ongelman. Tällä setupilla pitää hajota kaikki levyt samaan aikaan että menetän kaiken datan ja jos huono tuuri käy että 3+ hajoo ennen evakuointia niin menee se data vain sitten niiltä hajonneilta levyiltä. Ainoat huonot puolet setupissa on kirjoitusnopeus joka on maks levyn nopeus, lukunopeus jos ei ole data duplikoitu, snapshotin tekeminen jos data muuttuu paljon syncin aikana ja se alun helv... säätäminen että saa hommat toimimaan. Yksi datalevy on ns. "hajonnut" tämän aikana jolloin tuli todettua setupin toimivuus.

Samaan pääsee ZFS 2-levyn mirror vdev ja siihen päälle kansiokohtainen duplikointi vdeveille mutta tämä syö sitten levytilaa oikein urakalla.

Hm... miksi et tehnyt raidz2 tai raidz3? Ei olisi yhden tai kahden levyn hajoamisen haitannut? Nuo mircrosoftin koomailuviritykset kyllä toimii siinä missä unraidikin, mutta jos oikeasti haluaa saada tiedon talteen niin en menisi millään järjestelmällä alle kahden paritettilevyn. ZFS on vain paras ja luotettavin noista vaihtoehdoista kun se huolehtii bitrotista ja saa todella halvat ja hyvät snapshotit.

Tietenkin jos unix/linux maailma ei ole tuttu tai ei ole kiinnostusta siirtyä Microsoftin tuotteista muualle, niin ihan ymmärrettävää. Microsoftin tuotteet on vain sen verran huonot että edes he eivät pyöritä Azurea Windowssin päällä...

 

[andyks]

En vieläkään ymmärrä miten Unraid, tai oikeastaan Snapraid koska Unraid on vaan imo paska siihen verrattuna,

Vastasit jo oikeastaan itse itsellesi

Ainoat huonot puolet setupissa on kirjoitusnopeus joka on maks levyn nopeus, lukunopeus jos ei ole data duplikoitu, snapshotin tekeminen jos data muuttuu paljon syncin aikana ja se alun helv... säätäminen että saa hommat toimimaan.

Unraid on valmis Out of the box tuote joka ei vaadi mitään säätämistä yms. vaan on suht helposti kenen tahansa otettavissa käyttöön. Snapraidissa on paljon parempaa kuin unraidissa, mutta sen käyttöönotto ei ole läheskään yhtä helppoa ja osaamaton käyttäjä menee helposti vipuun ja "raid" ei toimi jos ajoja ei ole riittävän usein tai niihin tulee vikaa.

ZFS:ssä taas tulee nuo nopeusedut sekä "ilmaiset" snapshotit joissa ei riskiä sille että data voisi muuttua snapshotin aikana. Lisäksi ZFS on esim. FreeNASsilla käytännössä yhtä helppo ottaa käyttöön.
Millään näistä "tee-se-itse" ratkaisuista ei taida olla helppoa valmista tapaa datan helppoon backuppaamiseen. Ymmärtääkseni Synologyllä yms on backuppeihin valmiita toimintoja esim. ulkoiselle levylle tai pilveen tai toiseen Synologyyn esim. toisessa kiinteistössä.

Tuo sun kuvailema setuppi on mielestäni enemmän tuollainen hybridi backuppia ja pariteetin laskemista. Se ei ilmeisesti ole reaaliaikainen eli riski datalossille on pienessä aikaikkunassa kohtuullisen suuri?
Tarpeita on erilaisia ja siksi ratkaisujakin on useampia.

Pitkälle pääsee kun vain pitää mielessä että RAID != BACKUP

 

[Osjur]

Hm... miksi et tehnyt raidz2 tai raidz3? Ei olisi yhden tai kahden levyn hajoamisen haitannut? Nuo mircrosoftin koomailuviritykset kyllä toimii siinä missä unraidikin, mutta jos oikeasti haluaa saada tiedon talteen niin en menisi millään järjestelmällä alle kahden paritettilevyn. ZFS on vain paras ja luotettavin noista vaihtoehdoista kun se huolehtii bitrotista ja saa todella halvat ja hyvät snapshotit.

Tietenkin jos unix/linux maailma ei ole tuttu tai ei ole kiinnostusta siirtyä Microsoftin tuotteista muualle, niin ihan ymmärrettävää. Microsoftin tuotteet on vain sen verran huonot että edes he eivät pyöritä Azurea Windowssin päällä...

Juurihan sanoin että nykynen on raid6 (raidz2) snapshot raid. Snapraid ei ole missään tekemisissä microsoftin storage spaces ym. kanssa. Siinä on aivan yhtä hyvä suoja bitrottia vastaan kuin ZFS. Nuo vanhemmat raid5 pakat (yks windows ja yks linux) mitkä on itsellä hajonnut, on ollut aikakaudelta kun 1-2tb kovot oli vielä isoja. Ja koska Snapraid on JBOD tyylinen, niin jos se monen levyn rikko tulee ja tekee raidin rebuildista mahdottoman, niin silti niiltä levyiltä jotka jäi eloon saa sen datan vielä talteen.

ZFS:ssä taas tulee nuo nopeusedut sekä "ilmaiset" snapshotit joissa ei riskiä sille että data voisi muuttua snapshotin aikana. Lisäksi ZFS on esim. FreeNASsilla käytännössä yhtä helppo ottaa käyttöön.
Millään näistä "tee-se-itse" ratkaisuista ei taida olla helppoa valmista tapaa datan helppoon backuppaamiseen. Ymmärtääkseni Synologyllä yms on backuppeihin valmiita toimintoja esim. ulkoiselle levylle tai pilveen tai toiseen Synologyyn esim. toisessa kiinteistössä.

Tuo sun kuvailema setuppi on mielestäni enemmän tuollainen hybridi backuppia ja pariteetin laskemista. Se ei ilmeisesti ole reaaliaikainen eli riski datalossille on pienessä aikaikkunassa kohtuullisen suuri?
Tarpeita on erilaisia ja siksi ratkaisujakin on useampia.

Jees, periaatteessa tämä setup on hybridi, tosin sillä erotuksella että se duplikointi on reaaliaikainen sille tärkeelle datalle. Drivepool hoitaa sen duplikoinnin levyjen poolauksen lisäksi. Jos siirrän dataa poolin kansioon joka on määritetty duplikoitavaksi niin se data kirjoitetaan heti kaikille datalevyille ja tästä uudesta datasta snapraid laskee sitten vielä pariteetit öisin. Tätä käsittääkseni kutsutaan raid1+6 nykyään vaikka tää mun ratkaisu onkin realtime/snapshot hybridi. Ei niin tärkeä data jota ei duplikoida, voi kadota bittiavaruuteen, jos se levy minne se data kirjoitettiin, hajoaa ennen uutta pariteetin laskua.

Jossain kohtaa voisi varmaan ruveta tuota tärkeää dataa ajaa myös pilveen.

 

[jsa]

Apropoo, pitäs uusia modernimaan toi HBA levyservosta (max 2t rajote levyissä) joten mikäs se nyt on bang/$ mittarilla paras vaihtoehto? Kattelin IBM:n m1015:sta mutta onkos raadilla ehdottaa jotain parempaa värkkiä? Oman mausteensa soppaan tuo HP:n SAS expanderi..

 

[jultsu]

Haluttujen / vaadittujen liitäntöjen määrä? Ulkoisia vai sisäisiä? Millä liittimellä? Onko jokin tietty piirisarja ulkona yhteensopivuuksien / muiden syiden johdosta?

 

[jsa]

Haluttujen / vaadittujen liitäntöjen määrä? Ulkoisia vai sisäisiä? Millä liittimellä? Onko jokin tietty piirisarja ulkona yhteensopivuuksien / muiden syiden johdosta?

Sisäisellä SFF-8087:llä. Yhteensopivuus onkin sitten vähän vaikeampi juttu. LSI:n piirit on ainakin toimineet tuon kanssa, mutta tuo voi nirsoilla kyllä.

 

[HarriK]

Apropoo, pitäs uusia modernimaan toi HBA levyservosta (max 2t rajote levyissä) joten mikäs se nyt on bang/$ mittarilla paras vaihtoehto? Kattelin IBM:n m1015:sta mutta onkos raadilla ehdottaa jotain parempaa värkkiä? Oman mausteensa soppaan tuo HP:n SAS expanderi..

Oletko varmistanut että se HP:n SAS expander tukee kans yli 2t levyjä? Käsittääkseni ainakin SAS1 raudassa voi olla rajoituksia.

 

[Joku_242]

Sisäisellä SFF-8087:llä. Yhteensopivuus onkin sitten vähän vaikeampi juttu. LSI:n piirit on ainakin toimineet tuon kanssa, mutta tuo voi nirsoilla kyllä.

Mikä käyttis siinä siis on?