4 levyä hakusessa NAS:iin (z2 pakka pitää päivittää isommaksi)

[dun]

Eli olen tässä pyöritellyt ajatusta laajentaa nykyistä 4TB (3,5T) z2 pakkaa isommaksi kun koneiden määrä verkossa lisääntyy ja backuppeja tulee lisää.

Joka tapauksessa nykyinen jako pitää miettiä uusiksi erillisllä quota asetuksilla backupeille (ne alkaa viedä jo sen verran tilaa että muille tiedostoille jää 1T käyttötilaa joka tulee nopeasti täyteen (quotat kireämmiksi että clienttikoneiden filehistoryt tajuaa että sitä kapasiteettia ei ole rajattomasti saatavilla ja tekevät omalla logiikallaan valinnat mitä poistetaan ja mitä pidetään, käsin tylsää käydä poistelemassa tarpeettomia backuppeja).

Eli WD Red on ollut aikaisemmin kova sana, nyt pitäisi saada korvattua green + red levyjä 4 kpl (2TB lättyjä jokainen).

Hinta-laatusuhde tällä hetkellä vaikuttaisi olevan 4TB kannalla, mutta jotenkin tekisi mieli isompaa, joten mitäs vaihtoehtoja on, jos kokeilisi muuta kuin WD:n kiekkoa?

Edit: Suorituskyvyllä ei juuri ole väliä, koska kirjoitukset on pakalle sequentaalisia (ssd nappaa randomwritet kiinni ja zfs vielä lisänä cachettaa osan kirjoituksista, joten levyn sequentaalinopeus jos on 100MB/s+ niin riittää). Verkko nassille on gigasen kytkimen päässä ja siirtonopeus on vakaa 112MB/s verkon läpi kumpaankin suuntaan.

 

[dun]

No itse itselle vastaten, jos mennään WD Red:llä (kannattaa hihkaista jos tulee mieleen jokin muu luotettava raid-käyttöön tarkoitettu levy).

Riippuen levystä, niin seuraavat koot tulisi NAS:lle saataville:
4TB = 7 TiB
6TB = 11 TiB
8TB = 14 TiB
10TB = 17,5 TiB

Suomesta tänään:
4TB x 4 > 7TiB ~ 580€.
6TB x 4 > 11TiB ~ 866€.
8TB x 4 > 14TiB ~ 1120€.
10TB x 4 = 17,5TiB~ 1570€.

Saksasta (mindfactory):
4TB x 4 = ~ 501.68€ + toimituskulut.
6TB x 4 = ~ 771,80€ + toimituskulut.
8TB x 4 = ~ 970.72€ + toimituskulut.
10TB x 4 = ~ 1,353.96€ + toimituskulut.

 

[TheMeII]

My Cloud | Western Digital (WD) Tuon mirroroivan isoveljen ostin ja siellä oli redit sisällä (tällä hetkellä ei oo hyllyssä). 6 teran malli 160€ eli jos 4 ostais niin menis 640€ + sais nuo cloud kuoret vaikka myytäväksi.

niin omat levyt oli samalta kuukaudelta kuin mitä se postitettiin eli vaihtavat noihin levyt recertifionnissa.

 

[hese_e]

No itse itselle vastaten, jos mennään WD Red:llä (kannattaa hihkaista jos tulee mieleen jokin muu luotettava raid-käyttöön tarkoitettu levy).

Muistaakseni Toshiba N300 voisi kelvata tuohon.

 

[dun]

Muistaakseni Toshiba N300 voisi kelvata tuohon.

Ok, kiitti vinkistä, Mindfactorystä kun katsoi, niin hinnaksi tulisi nyt:
4TB x 4 = ~ 497,28€
6TB x 4 = ~ 692,28€
8TB x 4 = ~ 1139,92€

Eli Toshiba tulisi halvemmaksi 6TB kokoluokassa tänään. Hm...

 

[Pertti Kosunen]

Ok, kiitti vinkistä, Mindfactorystä kun katsoi, niin hinnaksi tulisi nyt:

Mindfactory ei lähetä Suomeen, tarkista Saksan Amazon, yli 40€ tilaukset tulevat ilman postikuluja.

 

[TheMeII]

Mindfactory ei lähetä Suomeen, tarkista Saksan Amazon, yli 40€ tilaukset tulevat ilman postikuluja.

Mutta lähettää mailboxde:lle.

 

[Pertti Kosunen]

Mutta lähettää mailboxde:lle.

Tulee lisää kuluja ja säätöä. (+ Mindfactorylla on joissakin levyissä rajoituksia, eivät suostu myymään kuin 2 kappaletta.)

 

[dun]

Mjoo, brittien amazonista näyttäisi parhaalta hinnat. Sieltä lähtisi nyt HGST:n nas-levyjä edulliseen hintaan jos puhutaan 6TB lätyistä, eli n. 702€ 4 x 6tb HGST Deskstar NAS.

Puuh, no joo. Nyt pitää vain odotella ja pitää sormi liipaisimella että saa ostettua noita lätysköjä. Seagaten Ironwolffit oli sika halpoja, mutta niitä pysty ostamaan samalla kortilla vain 2 kpl. Joka on ihan perseestä.

 

[hese_e]

Dustinissa on HGST NAS 4Tb tarjouksessa 125,5€

Levyistä on ihan ok vertailukin:
NAS HDD review: 18 models compared
https://us.hardware.info/reviews/7265/nas-hdd-review-18-models-compared
Siitä noise level oli itselle se mielenkiintoisin, mutta toistaiseksi raidipakan uusinta saa odottaa. Lähes 10v vanhat 2Tb WD greenit (parking modauksella) sekä saman ikäinen seagate porskuttaa edelleen.

 

[TheMeII]

My Cloud Mirror Gen 2 | Western Digital (WD)
Tuosta nyt 2x 6GB WD Redit 300€ + tuo cloudmirror2 kotelo. en tiedä montako varastossa.

 

[dun]

No, se siitä budjetista, pistelin sit kiintis budjetin kiinni 1080 ti-näyttikseen, että pääsis taas pelailemaan jotain. Saapa nähdä jääkö i5-2500@4,3GHz jalkoihin kuinka pahasti 3440x1440@60hz resolla...

 

[hese_e]

My Cloud Mirror Gen 2 | Western Digital (WD)
Tuosta nyt 2x 6GB WD Redit 300€ + tuo cloudmirror2 kotelo. en tiedä montako varastossa.

Kiitti vinkistä, piti tilata ja paketti tuli tänään. Levyt oli uunituoreet (tarkistettu vanhalla usb2 levykotelolla):

 

[dun]

No huoh, tilasin sitten kun edullisen näköisesti lähti 4 x 4TB Ironwolffit (~130 á kpl) Suomalaisesta kaupasta. Joskus ajattelin että en enää ikinä tilaa Seagaten levyjä, mutta tuolla hinnalla ei ollut järkeä jättää kaupan hyllylle.

Kohta on ylimääräisenä kasa 2 TB levyjä ja pitäs keksiä mitä niillä sit tekis

 

[Anvi]

Ostin äskettäin 2. kpl. 6TB IronWolf NAS levyjä ja se oli pahin virhe rautaostoksilla vähään aikaan.
Levyjen käynnistyminen ja kaikki luku/kirjoitusoperaatiot aiheuttaa aivan järkyttävää meteliä.

Molemmat levyt tekee samaa, joten ei mene edes minkään yksittäisen vian piikkiin.

En ole ostanut Seagatea ainakaan 10 vuoteen ja tämä kokeilu jäi viimeiseksi.
Jatkossa tulee taas WD tai HGST levyjä.

 

[dun]

Juu, no nyt mennään näillä seuraavat 5 vuotta oli äänekkäitä tai ei. ZFS z2 pakkaan menevät, niin parikin levyä saa laueta ennen kuin tiedot on karussa.

Edelliset levyt on 3 x 2TB greenejä ja 1 x wd red (jonka ostin yhden rikkoutuneen greenin tilalle).

Seuraava nas on varmaan isompi kuin 4 levyä, koska ZFS:n rajat tulee 4 levyllä nopeasti vastaan.

 

[dun]

Ei tuo levy onneksi ollut ollenkaan äänekäs. En edes omalta pelikoneelta erota levyn rasahdusääniä nyt, eli ainakaan ensimmäinen yksilö ei ole äänekkäämpi kuin WD Green 2TB levy. Ensimmäinen aikaehdotus per levy oli vähän vajaa 20h, mutta nyt näyttää jo paljon mukavammalta vähän reilulta 6h:lta. Eli ehkä vielä tänään ehtii toisenkin vaihtamaan ja sitten huomenna loput kaksi.

  pool: *******
 state: DEGRADED
status: One or more devices is currently being resilvered.  The pool will
        continue to function, possibly in a degraded state.
action: Wait for the resilver to complete.
  scan: resilver in progress since Fri Dec 22 17:28:18 2017
    43.9G scanned out of *** at 296M/s, *** to go
    10.6G resilvered, *** done

 

[dun]

Hm... nyt kun alkoi katsella vähän ympärilleen, niin voisikin hommata jonkun tämmöisen tulevaisuutta ajatellen: SilverStone Technology Co., Ltd.- DS380. Saisi tarvittaessa tehtyä uusiksi levypakan ja saisi käyttöön 6 levyn kapasiteetin.

 

[Nervous]

Ostin äskettäin 2. kpl. 6TB IronWolf NAS levyjä ja se oli pahin virhe rautaostoksilla vähään aikaan.
Levyjen käynnistyminen ja kaikki luku/kirjoitusoperaatiot aiheuttaa aivan järkyttävää meteliä.

Molemmat levyt tekee samaa, joten ei mene edes minkään yksittäisen vian piikkiin.

En ole ostanut Seagatea ainakaan 10 vuoteen ja tämä kokeilu jäi viimeiseksi.
Jatkossa tulee taas WD tai HGST levyjä.

WD:n ja HGST:n levytkin osaavat metelöidä mallista riippuen. Tosin pelkät desibelit eivät kerro mitään äänen ärsyttävyydestä.
NAS HDD review: 18 models compared
Omassa käytössä tosin aivan sama vaikka kirjoitus/luku-operaatiossa hieman rutisee, koska levyni idlaavat 95% ajasta.

 

[Pertti Kosunen]

WD:n ja HGST:n levytkin osaavat metelöidä mallista riippuen.

HGST Deskstar NAS HDN728080ALE604 8TB 7200rpm levyt ovat huomattavasti äänekkäämpiä kuin WD:n 5400rpm Green/Purple/Red levyt joita minulla on ollut montaa eri sukupolvea raid-käytössä, hakuäänet ja käynnistys kuuluvat melko selvästi jopa 5 metrin päähän.

 

[dun]

Itsellä on 3 kpl nyt noita ironwolffeja 100% loadilla ja ei noista kyllä tossa omassa Chieftekin mini-itx nas kotelosta ääntä yleisäänen läpi saa tulemaan.

Tosin eipä minulla ole mikään kone huoneessa passiivikaan, vain jotain 25-30dB kun on isot tuulettimet ja isot jäähyt. Mutta ärsyttäviä rapinoita ei ainakaan näiden 4TB lättyjen kanssa ole, 6TB lätyt oli tossa testissäkin jo aika paljon äänekkäämpiä, niin kävi onneksi siis tuuri

Jos 2018 vuoden tavoite olisi sitten upgradeta nykyinen 4-bay nassi 8-12-bayksi ja hommata joko mini-itx emo tai kortti tuohon kaveriksi. ZFS tykkää muistista, niin nykyinen 8GB alkaa olla vähän naftisti sille kun pakan koko alkaa olla iso, vaikkakin data ei ole dedup tai compressiivista (taino, odottelen zdb:n tuloksia...).

Edit: Syy miksi isompi nas kotelo tulisi (ehkä) tarpeeseen on se että laajennus olisi vähän kivempi tehdä... Tosin zfs:n tuntien pitää varmaan vetää kaikki levyt kerralla kiinni ja sitten aina ostella isompia kun tila loppuu tai levy hajoaa. Nyt kun siirryinkin 4TB lättyihin, niin jäi alle vuoden ikäinen 2TB WD red ja nuo 3 x 2TB Greenejä (5-7 vuotta 24/7) ylimääräiseksi ja niille voisi keksiä jotain käyttöä...

 

[dun]

Hetkonen, täällähän olis hyviä vaihtoehtoja:
Mini-ITX (8-bay): U-NAS NSC-810 Server Chassis (Power Supply Not Included)
Micro-ATX (8-bay): U-NAS NSC-810A Server Chassis (Power Supply Not Included)

 

[Pertti Kosunen]

Hetkonen, täällähän olis hyviä vaihtoehtoja:
Mini-ITX (8-bay): U-NAS NSC-810 Server Chassis (Power Supply Not Included)
Micro-ATX (8-bay): U-NAS NSC-810A Server Chassis (Power Supply Not Included)

1U virtalähteet on vaan vähän huono juttu äänien kannalta, kun on niin pieni tuuletin.

 

[joku]

Nassiin oikeat levyt ovat Red / RedPro wd:ltä.

 

[dun]

Noin voi olla, mutta ironwolffit oli reilusti halvemmat, aika hiljaiset ja vielä ei ole yksikään lauennut. Eli 5-vuoden sisällä näkee sit kuinka hyviä nää yksilöt oli.

Paperilla molemmat levyt on about samat, joten senkään puolesta ei harmittanut.

 

[dun]

Suorituskykykään ei ole huono (fio 2.0.9)

Asennus:

sudo su -
yum install -y make gcc libaio-devel git || ( apt-get update && apt-get install -y make git gcc libaio-dev  </dev/null )
wget https://github.com/Crowd9/Benchmark/raw/master/fio-2.0.9.tar.gz ; tar xf fio*
cd fio*
make
make install

Testiajo ZFS:lle:

# ZFS: --direct=0
# Other: --direct=1

# READ
fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_iops --bs=4k --iodepth=64 --size=4G --readwrite=read

# WRITE
fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_write --bs=4k --iodepth=64 --size=4G --readwrite=write

# RANDOM (75% read, 25% write)
fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_readwrite --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75

Josta päädytäänkin aasinsillan kautta siihen että nykyisellään ZFS pakka näköjään sopii vähän huonosti random accessin käyttöön niin kuin näkyy.

Ensimmäiset kaksi testiä on luonteeltaan sequentaalisia ja seuraavat kaksi on random 4k:ta. Eli voisin oikeastaan katsoa jos lohkaisisi ssd:stä zlog (write) ja l2arc (read) osiot tuonne, niin saisi lisää random nopeutta pakalta (jolloin kirjoitukset osuisi yleensä ssd:tä vasten ennen kuin päätyisi suoraan levylle).

Huom käyttöä simuloitiin 64 yhtäaikaisella io-operaatiolla, eli iodepth=64. Tämä tarkoittaa että pakka kestää 64 sequentaalista kirjoitusta saman-aikaisesti 60MB/s keskiarvolla. Jos iodepth pudotetaan yksittäiseksi operaatioksi. Eli yksi operaatio kirjoittaa 10GB tiedoston, koska muistia on 8GB nassissa, niin saadaan cachenkin vaikutusta vähennettyä (koska pienemmällä määrällä kirjoitus mahtuu rammiin ja silloin ei oikeasti mitata pakan nopeutta...).

ZFS:n mittauksessa ei voi käyttää iodirectiä, koska sitä ei tueta, aina mennään kakun kautta pakkaan.

Read: io=4096.0MB, bw=699634KB/s, iops=174908 , runt=  5995msec
Write: io=4096.0MB, bw=60862KB/s, iops=15215 , runt= 68915msec
Random: combined - iops=428
  read : io=3071.2MB, bw=1285.1KB/s, iops=321 , runt=2445684msec
  write: io=1024.9MB, bw=439397 B/s, iops=107 , runt=2445684msec

Edit:
Iodepth=1:llä lukunopeudessa tuli näköjään takapakkia aika huolella kun lukuoperaatiot ei säikeistynytkään...
Iodepth=1:llä kirjoituksessa päädyttiin about samaan lopputulokseen kun käytettiin 10G testitiedostoa. Eli aika hyvin ZFS pelittää. 3G tiedostolla päästiin pikkaisen parempaan, mutta ei merkittävästi parempaan lopputulokseen.

read (iodepth=1): io=3072.0MB, bw=255626KB/s, iops=63906 , runt= 12306msec
read (iodepth=1): io=10240MB,  bw=322887KB/s, iops=80721 , runt= 32475msec
write (iodepth=1): io=3072.0MB, bw=61711KB/s, iops=15427 , runt= 50975msec
write (iodepth=1): io=10240MB,  bw=55877KB/s, iops=13969 , runt=187659msec

 

[samim]

Hm... nyt kun alkoi katsella vähän ympärilleen, niin voisikin hommata jonkun tämmöisen tulevaisuutta ajatellen: SilverStone Technology Co., Ltd.- DS380. Saisi tarvittaessa tehtyä uusiksi levypakan ja saisi käyttöön 6 levyn kapasiteetin.

Sanovat, että tossa kotelossa ei toimi levyjen tuuletus, ja levyt käyvät sen takia kuumana.