4 levyä hakusessa NAS:iin (z2 pakka pitää päivittää isommaksi)

Viestiketju alueella 'Tallennus' , aloittaja dun, 13.11.2017.

  1. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Eli olen tässä pyöritellyt ajatusta laajentaa nykyistä 4TB (3,5T) z2 pakkaa isommaksi kun koneiden määrä verkossa lisääntyy ja backuppeja tulee lisää.

    Joka tapauksessa nykyinen jako pitää miettiä uusiksi erillisllä quota asetuksilla backupeille (ne alkaa viedä jo sen verran tilaa että muille tiedostoille jää 1T käyttötilaa joka tulee nopeasti täyteen (quotat kireämmiksi että clienttikoneiden filehistoryt tajuaa että sitä kapasiteettia ei ole rajattomasti saatavilla ja tekevät omalla logiikallaan valinnat mitä poistetaan ja mitä pidetään, käsin tylsää käydä poistelemassa tarpeettomia backuppeja).

    Eli WD Red on ollut aikaisemmin kova sana, nyt pitäisi saada korvattua green + red levyjä 4 kpl (2TB lättyjä jokainen).

    Hinta-laatusuhde tällä hetkellä vaikuttaisi olevan 4TB kannalla, mutta jotenkin tekisi mieli isompaa, joten mitäs vaihtoehtoja on, jos kokeilisi muuta kuin WD:n kiekkoa?

    Edit: Suorituskyvyllä ei juuri ole väliä, koska kirjoitukset on pakalle sequentaalisia (ssd nappaa randomwritet kiinni ja zfs vielä lisänä cachettaa osan kirjoituksista, joten levyn sequentaalinopeus jos on 100MB/s+ niin riittää). Verkko nassille on gigasen kytkimen päässä ja siirtonopeus on vakaa 112MB/s verkon läpi kumpaankin suuntaan.
     
    Viimeksi muokattu: 13.11.2017
  2. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    No itse itselle vastaten, jos mennään WD Red:llä (kannattaa hihkaista jos tulee mieleen jokin muu luotettava raid-käyttöön tarkoitettu levy).

    Riippuen levystä, niin seuraavat koot tulisi NAS:lle saataville:
    4TB = 7 TiB
    6TB = 11 TiB
    8TB = 14 TiB
    10TB = 17,5 TiB

    Suomesta tänään:

    4TB x 4 > 7TiB ~ 580€.
    6TB x 4 > 11TiB ~ 866€.
    8TB x 4 > 14TiB ~ 1120€.
    10TB x 4 = 17,5TiB~ 1570€.

    Saksasta (mindfactory):

    4TB x 4 = ~ 501.68€ + toimituskulut.
    6TB x 4 = ~ 771,80€ + toimituskulut.
    8TB x 4 = ~ 970.72€ + toimituskulut.
    10TB x 4 = ~ 1,353.96€ + toimituskulut.
     
    Viimeksi muokattu: 13.11.2017
  3. TheMeII

    TheMeII echo "%0|%0">s.bat|s Tukijäsen

    Viestejä:
    2 813
    Rekisteröitynyt:
    13.11.2016
    My Cloud | Western Digital (WD) Tuon mirroroivan isoveljen ostin ja siellä oli redit sisällä (tällä hetkellä ei oo hyllyssä). 6 teran malli 160€ eli jos 4 ostais niin menis 640€ + sais nuo cloud kuoret vaikka myytäväksi.

    niin omat levyt oli samalta kuukaudelta kuin mitä se postitettiin eli vaihtavat noihin levyt recertifionnissa.
     
  4. hese_e

    hese_e

    Viestejä:
    889
    Rekisteröitynyt:
    20.10.2016
    Muistaakseni Toshiba N300 voisi kelvata tuohon.
     
  5. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Ok, kiitti vinkistä, Mindfactorystä kun katsoi, niin hinnaksi tulisi nyt:
    4TB x 4 = ~ 497,28€
    6TB x 4 = ~ 692,28€
    8TB x 4 = ~ 1139,92€

    Eli Toshiba tulisi halvemmaksi 6TB kokoluokassa tänään. Hm...
     
  6. Pertti Kosunen

    Pertti Kosunen Basic Input/Output System

    Viestejä:
    2 818
    Rekisteröitynyt:
    19.10.2016
    Mindfactory ei lähetä Suomeen, tarkista Saksan Amazon, yli 40€ tilaukset tulevat ilman postikuluja.
     
  7. TheMeII

    TheMeII echo "%0|%0">s.bat|s Tukijäsen

    Viestejä:
    2 813
    Rekisteröitynyt:
    13.11.2016
    Mutta lähettää mailboxde:lle.
     
  8. Pertti Kosunen

    Pertti Kosunen Basic Input/Output System

    Viestejä:
    2 818
    Rekisteröitynyt:
    19.10.2016
    Tulee lisää kuluja ja säätöä. (+ Mindfactorylla on joissakin levyissä rajoituksia, eivät suostu myymään kuin 2 kappaletta.)
     
  9. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Mjoo, brittien amazonista näyttäisi parhaalta hinnat. Sieltä lähtisi nyt HGST:n nas-levyjä edulliseen hintaan jos puhutaan 6TB lätyistä, eli n. 702€ 4 x 6tb HGST Deskstar NAS.

    Puuh, no joo. Nyt pitää vain odotella ja pitää sormi liipaisimella että saa ostettua noita lätysköjä. Seagaten Ironwolffit oli sika halpoja, mutta niitä pysty ostamaan samalla kortilla vain 2 kpl. Joka on ihan perseestä.
     
  10. hese_e

    hese_e

    Viestejä:
    889
    Rekisteröitynyt:
    20.10.2016
    Dustinissa on HGST NAS 4Tb tarjouksessa 125,5€

    Levyistä on ihan ok vertailukin:
    NAS HDD review: 18 models compared

    Siitä noise level oli itselle se mielenkiintoisin, mutta toistaiseksi raidipakan uusinta saa odottaa. Lähes 10v vanhat 2Tb WD greenit (parking modauksella) sekä saman ikäinen seagate porskuttaa edelleen.
     
  11. TheMeII

    TheMeII echo "%0|%0">s.bat|s Tukijäsen

    Viestejä:
    2 813
    Rekisteröitynyt:
    13.11.2016
    hese_e tykkää tästä.
  12. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    No, se siitä budjetista, pistelin sit kiintis budjetin kiinni 1080 ti-näyttikseen, että pääsis taas pelailemaan jotain. Saapa nähdä jääkö i5-2500@4,3GHz jalkoihin kuinka pahasti 3440x1440@60hz resolla...
     
  13. hese_e

    hese_e

    Viestejä:
    889
    Rekisteröitynyt:
    20.10.2016
    Kiitti vinkistä, piti tilata ja paketti tuli tänään. Levyt oli uunituoreet (tarkistettu vanhalla usb2 levykotelolla):


    disk2.png disk1.png
     
    TheMeII tykkää tästä.
  14. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    No huoh, tilasin sitten kun edullisen näköisesti lähti 4 x 4TB Ironwolffit (~130 á kpl) Suomalaisesta kaupasta. Joskus ajattelin että en enää ikinä tilaa Seagaten levyjä, mutta tuolla hinnalla ei ollut järkeä jättää kaupan hyllylle.

    Kohta on ylimääräisenä kasa 2 TB levyjä ja pitäs keksiä mitä niillä sit tekis :(
     
  15. Anvi

    Anvi

    Viestejä:
    168
    Rekisteröitynyt:
    17.10.2016
    Ostin äskettäin 2. kpl. 6TB IronWolf NAS levyjä ja se oli pahin virhe rautaostoksilla vähään aikaan.
    Levyjen käynnistyminen ja kaikki luku/kirjoitusoperaatiot aiheuttaa aivan järkyttävää meteliä.

    Molemmat levyt tekee samaa, joten ei mene edes minkään yksittäisen vian piikkiin.

    En ole ostanut Seagatea ainakaan 10 vuoteen ja tämä kokeilu jäi viimeiseksi.
    Jatkossa tulee taas WD tai HGST levyjä.
     
  16. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Juu, no nyt mennään näillä seuraavat 5 vuotta oli äänekkäitä tai ei. ZFS z2 pakkaan menevät, niin parikin levyä saa laueta ennen kuin tiedot on karussa.

    Edelliset levyt on 3 x 2TB greenejä ja 1 x wd red (jonka ostin yhden rikkoutuneen greenin tilalle).

    Seuraava nas on varmaan isompi kuin 4 levyä, koska ZFS:n rajat tulee 4 levyllä nopeasti vastaan.
     
  17. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Ei tuo levy onneksi ollut ollenkaan äänekäs. En edes omalta pelikoneelta erota levyn rasahdusääniä nyt, eli ainakaan ensimmäinen yksilö ei ole äänekkäämpi kuin WD Green 2TB levy. Ensimmäinen aikaehdotus per levy oli vähän vajaa 20h, mutta nyt näyttää jo paljon mukavammalta vähän reilulta 6h:lta. Eli ehkä vielä tänään ehtii toisenkin vaihtamaan ja sitten huomenna loput kaksi.


    Koodi:
      pool: *******
     state: DEGRADED
    status: One or more devices is currently being resilvered.  The pool will
            continue to function, possibly in a degraded state.
    action: Wait for the resilver to complete.
      scan: resilver in progress since Fri Dec 22 17:28:18 2017
        43.9G scanned out of *** at 296M/s, *** to go
        10.6G resilvered, *** done
    
     
  18. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Hm... nyt kun alkoi katsella vähän ympärilleen, niin voisikin hommata jonkun tämmöisen tulevaisuutta ajatellen: SilverStone Technology Co., Ltd.- DS380. Saisi tarvittaessa tehtyä uusiksi levypakan ja saisi käyttöön 6 levyn kapasiteetin.
     
  19. Nervous

    Nervous

    Viestejä:
    308
    Rekisteröitynyt:
    18.10.2016
    WD:n ja HGST:n levytkin osaavat metelöidä mallista riippuen. Tosin pelkät desibelit eivät kerro mitään äänen ärsyttävyydestä.
    NAS HDD review: 18 models compared
    Omassa käytössä tosin aivan sama vaikka kirjoitus/luku-operaatiossa hieman rutisee, koska levyni idlaavat 95% ajasta.
     
  20. Pertti Kosunen

    Pertti Kosunen Basic Input/Output System

    Viestejä:
    2 818
    Rekisteröitynyt:
    19.10.2016
    HGST Deskstar NAS HDN728080ALE604 8TB 7200rpm levyt ovat huomattavasti äänekkäämpiä kuin WD:n 5400rpm Green/Purple/Red levyt joita minulla on ollut montaa eri sukupolvea raid-käytössä, hakuäänet ja käynnistys kuuluvat melko selvästi jopa 5 metrin päähän.
     
  21. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Itsellä on 3 kpl nyt noita ironwolffeja 100% loadilla ja ei noista kyllä tossa omassa Chieftekin mini-itx nas kotelosta ääntä yleisäänen läpi saa tulemaan.

    Tosin eipä minulla ole mikään kone huoneessa passiivikaan, vain jotain 25-30dB kun on isot tuulettimet ja isot jäähyt. Mutta ärsyttäviä rapinoita ei ainakaan näiden 4TB lättyjen kanssa ole, 6TB lätyt oli tossa testissäkin jo aika paljon äänekkäämpiä, niin kävi onneksi siis tuuri :)

    Jos 2018 vuoden tavoite olisi sitten upgradeta nykyinen 4-bay nassi 8-12-bayksi ja hommata joko mini-itx emo tai kortti tuohon kaveriksi. ZFS tykkää muistista, niin nykyinen 8GB alkaa olla vähän naftisti sille kun pakan koko alkaa olla iso, vaikkakin data ei ole dedup tai compressiivista (taino, odottelen zdb:n tuloksia...).

    Edit: Syy miksi isompi nas kotelo tulisi (ehkä) tarpeeseen on se että laajennus olisi vähän kivempi tehdä... Tosin zfs:n tuntien pitää varmaan vetää kaikki levyt kerralla kiinni ja sitten aina ostella isompia kun tila loppuu tai levy hajoaa. Nyt kun siirryinkin 4TB lättyihin, niin jäi alle vuoden ikäinen 2TB WD red ja nuo 3 x 2TB Greenejä (5-7 vuotta 24/7) ylimääräiseksi ja niille voisi keksiä jotain käyttöä...
     
  22. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
  23. Pertti Kosunen

    Pertti Kosunen Basic Input/Output System

    Viestejä:
    2 818
    Rekisteröitynyt:
    19.10.2016
  24. joku

    joku

    Viestejä:
    463
    Rekisteröitynyt:
    19.10.2016
    Nassiin oikeat levyt ovat Red / RedPro wd:ltä.
     
  25. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Noin voi olla, mutta ironwolffit oli reilusti halvemmat, aika hiljaiset ja vielä ei ole yksikään lauennut. Eli 5-vuoden sisällä näkee sit kuinka hyviä nää yksilöt oli.

    Paperilla molemmat levyt on about samat, joten senkään puolesta ei harmittanut.
     
    joku tykkää tästä.
  26. dun

    dun

    Viestejä:
    228
    Rekisteröitynyt:
    18.10.2016
    Suorituskykykään ei ole huono (fio 2.0.9)

    Asennus:
    Koodi:
    sudo su -
    yum install -y make gcc libaio-devel git || ( apt-get update && apt-get install -y make git gcc libaio-dev  </dev/null )
    wget https://github.com/Crowd9/Benchmark/raw/master/fio-2.0.9.tar.gz ; tar xf fio*
    cd fio*
    make
    make install
    
    Testiajo ZFS:lle:
    Koodi:
    # ZFS: --direct=0
    # Other: --direct=1
    
    # READ
    fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_iops --bs=4k --iodepth=64 --size=4G --readwrite=read
    
    # WRITE
    fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_write --bs=4k --iodepth=64 --size=4G --readwrite=write
    
    # RANDOM (75% read, 25% write)
    fio --randrepeat=1 --ioengine=libaio --direct=0 --gtod_reduce=1 --name=test --filename=/tank/public/test_readwrite --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75
    
    
    Josta päädytäänkin aasinsillan kautta siihen että nykyisellään ZFS pakka näköjään sopii vähän huonosti random accessin käyttöön niin kuin näkyy.

    Ensimmäiset kaksi testiä on luonteeltaan sequentaalisia ja seuraavat kaksi on random 4k:ta. Eli voisin oikeastaan katsoa jos lohkaisisi ssd:stä zlog (write) ja l2arc (read) osiot tuonne, niin saisi lisää random nopeutta pakalta (jolloin kirjoitukset osuisi yleensä ssd:tä vasten ennen kuin päätyisi suoraan levylle).

    Huom käyttöä simuloitiin 64 yhtäaikaisella io-operaatiolla, eli iodepth=64. Tämä tarkoittaa että pakka kestää 64 sequentaalista kirjoitusta saman-aikaisesti 60MB/s keskiarvolla. Jos iodepth pudotetaan yksittäiseksi operaatioksi. Eli yksi operaatio kirjoittaa 10GB tiedoston, koska muistia on 8GB nassissa, niin saadaan cachenkin vaikutusta vähennettyä (koska pienemmällä määrällä kirjoitus mahtuu rammiin ja silloin ei oikeasti mitata pakan nopeutta...).

    ZFS:n mittauksessa ei voi käyttää iodirectiä, koska sitä ei tueta, aina mennään kakun kautta pakkaan.

    Koodi:
    Read: io=4096.0MB, bw=699634KB/s, iops=174908 , runt=  5995msec
    Write: io=4096.0MB, bw=60862KB/s, iops=15215 , runt= 68915msec
    Random: combined - iops=428
      read : io=3071.2MB, bw=1285.1KB/s, iops=321 , runt=2445684msec
      write: io=1024.9MB, bw=439397 B/s, iops=107 , runt=2445684msec
    
    Edit:
    Iodepth=1:llä lukunopeudessa tuli näköjään takapakkia aika huolella kun lukuoperaatiot ei säikeistynytkään...
    Iodepth=1:llä kirjoituksessa päädyttiin about samaan lopputulokseen kun käytettiin 10G testitiedostoa. Eli aika hyvin ZFS pelittää. 3G tiedostolla päästiin pikkaisen parempaan, mutta ei merkittävästi parempaan lopputulokseen.

    Koodi:
    read (iodepth=1): io=3072.0MB, bw=255626KB/s, iops=63906 , runt= 12306msec
    read (iodepth=1): io=10240MB,  bw=322887KB/s, iops=80721 , runt= 32475msec
    write (iodepth=1): io=3072.0MB, bw=61711KB/s, iops=15427 , runt= 50975msec
    write (iodepth=1): io=10240MB,  bw=55877KB/s, iops=13969 , runt=187659msec
    
     
    Viimeksi muokattu: 29.12.2017
  27. samim

    samim

    Viestejä:
    147
    Rekisteröitynyt:
    17.10.2016
    Sanovat, että tossa kotelossa ei toimi levyjen tuuletus, ja levyt käyvät sen takia kuumana.