NAS rakentelut

[Jusaus_IT]

Antecin Sonata II kotelossa:
ASUS PRIME Z370-P
Intel i5-8400 2.8GHz
32GB DDR4
GeForce GTX 750 Ti

Levyinä:
1 x ST4000DM004 (parity)
3 x WDC_WD30EFRX (varasto)
1 x KBG40ZNV256G (cache)

Varastotilaa medialle tällä kokoonpanolla 9TB

Softana Unraid Plus, jossa dockerin kautta Plex-serveri ainoana rasituksen aiheuttajana tällä hetkellä.

 

[e0f]

Hyviä pointteja @jpo ja @Purulumi
Taidan koittaa säätää tuota proxmox+truenas -comboa ensin, kun ei tuo komentorivi niin pelottava ole ja levyjen määräkin on vielä maltillinen. Laitan sitten HBA-kortin tilaukseen jos palaa pinna tuon kanssa
Ja ehkä otan jonkun luotettavamman SSD:n (meneekö raidi samalla jos käyttis kosahtaa, vai saako pakan uuteen järjestelmään plug n playnä?)

Prosessoriksi joku 1700 Ryzen (8c/16t) tai vastaava? Nämä ymmärtääkseni tukee ECC muisteja? Lisäksi mahdollinen päivitysmahdollisuus 5000-sarjaan bios päivityksellä, niin ei lopu jerkku kesken tulevaisuudessakaan

kieltämättä houkuttelisi, voisi jopa mahtua budjettiinkin kun alkaa olemaan ikääkin jo yli 5 vuotta

 

[Bahamies]

Taidan koittaa säätää tuota proxmox+truenas -comboa ensin, kun ei tuo komentorivi niin pelottava ole ja levyjen määräkin on vielä maltillinen.

Valitsit sitten minkä vaan NAS-ratkaisun niin jos se on UNIX-pohjainen, komentorivi tulee kyllä tutuksi ennemmin tai myöhemmin. Itse aloitin Linuxin käytön aika lailla nollista muutama vuosi sitten ja suurin palvelus minkä itselleen voi tehdä on se, että opettelee siihen terminaalin käyttöön saman tien. GUI:ssa saa monet asiat hoidettua, mutta sitten kun terminaali alkaa olla tuttu, niin monet asiat tuntuvat vaan paljon helpommalta sen kautta.

E: Riippuu toki tietenkin myös käyttäjän tarpeista. TrueNAS:ssa monet asiat onnistuvat kyllä nykyään suoraan GUI:sta.

 

[Joku_242]

Valitsit sitten minkä vaan NAS-ratkaisun niin jos se on UNIX-pohjainen, komentorivi tulee kyllä tutuksi ennemmin tai myöhemmin. Itse aloitin Linuxin käytön aika lailla nollista muutama vuosi sitten ja suurin palvelus minkä itselleen voi tehdä on se, että opettelee siihen terminaalin käyttöön saman tien. GUI:ssa saa monet asiat hoidettua, mutta sitten kun terminaali alkaa olla tuttu, niin monet asiat tuntuvat vaan paljon helpommalta sen kautta.

E: Riippuu toki tietenkin myös käyttäjän tarpeista. TrueNAS:ssa monet asiat onnistuvat kyllä nykyään suoraan GUI:sta.

Tämä kyllä. Komentorivin osaaminen on todella hyödyllistä UNIX-pohjaisten kilkkeiden kanssa toimiessa, ja esim. IT-alalla töissä ollessa melkein välttämätöntä. Et jos on alalla opiskelemassa, NAS-boksin tunkkailussa voi oikeasti oppia hyödyllisiä asioita.

 

[JiiPee]

Tämä kyllä. Komentorivin osaaminen on todella hyödyllistä UNIX-pohjaisten kilkkeiden kanssa toimiessa, ja esim. IT-alalla töissä ollessa melkein välttämätöntä. Et jos on alalla opiskelemassa, NAS-boksin tunkkailussa voi oikeasti oppia hyödyllisiä asioita.

Varsinkin nuoremmille vinkkinä että jos IT ala kiinnostaa niin virtuaalikoneitten kanssa vaan tunkkailemaan kaikenmoista, se opettaa tekijäänsä todella tehokkaasti ja ei ole mitään paineita tunkkailun suhteen, saa mennä vituiksi ja ei haittaa.
Itte aikoinaan tuli ihan omasta mielenkiinnosta tutustuttua keikenlaiseen ja ihan kotona tunkkasin vaikka mitä. Sitten pääsin oppisopimuksella omaan kuntaan opsikelemaan datanomiksi ja siellä sitten tuli tehtyä kaikenlaista kivaa kun vakkari mikrotuki ei ollu kiireen takia ehtiny mitään tehdä.
Pystytin sinne esim. WDS serverin jonka jälkeen työasemien asennukset sujui suoraan verkosta. Aiemmin mikrotuki oli tehny homman CD:tä. Exkankeen eli mäsän sähköpostipalvelimen päivittelin kanssa, sekin oli joku ikivanha ja sen päivityksen kanssa oli aika iso jumppa.
Vakkari mikrotuki ihmetteli että mistä olen kaiken oppinut kun osaamista oli kuulemma enemmän kuin hänellä joka oli ihan koulut käynyt alalle. Kerroin että ihan oma mielenkiinto opettanut.

Nykyisin tosin pilveen on siirtyny paljon juttuja. Tuskin enää kannattaa alkaa omaa exkankee palvelinta esim. pyörittelemään ellei kyseessä ole todella iso organisaatio ja sittenkin se varmaan kannattaa pyöritellä pilvessä.

 

[Ihmemies]

Tällainen C621 + 14core E5 2860 V4 vie muuten ihan saatanasti virtaa. Kun koneessa on virrat "pois päältä", se ottaa 8W seinästä. Ilmeiseti IPMI/BMC jauhaa siellä taustalla. Idlenä 70W Voi vittu, tohon kun muutama levy niin se on 800kWh/v, heh näillä sähkön hinnoilla.

Tuli vähän yllätyksenä, että kone, joka ei tee yhtään mitään, voi ottaa noin paljon virtaa. Noh tuolle ei voi varmaan mitään tehdä, paitsi vaihtaa rautaa pihimpään. En vaan tiedä, mikä sellainen voisi olla.

Proxmox on siinä mielessä miellyttävä, että säädöt voi tehdä suoraan nettiselaimesta. Ei tarvitse olla fyysistä pääsyä servulle. Eli ei tarvitse lisää näyttöjä/näppiksiä tms. softien asennuksiin, tai nostaa ees persettä penkistä.

 

[Joku_242]

Tällainen C621 + 14core E5 2860 V4 vie muuten ihan saatanasti virtaa. Kun koneessa on virrat "pois päältä", se ottaa 8W seinästä. Ilmeiseti IPMI/BMC jauhaa siellä taustalla. Idlenä 70W Voi vittu, tohon kun muutama levy niin se on 800kWh/v, heh näillä sähkön hinnoilla.

Tuli vähän yllätyksenä, että kone, joka ei tee yhtään mitään, voi ottaa noin paljon virtaa. Noh tuolle ei voi varmaan mitään tehdä, paitsi vaihtaa rautaa pihimpään. En vaan tiedä, mikä sellainen voisi olla.

Proxmox on siinä mielessä miellyttävä, että säädöt voi tehdä suoraan nettiselaimesta. Ei tarvitse olla fyysistä pääsyä servulle. Eli ei tarvitse lisää näyttöjä/näppiksiä tms. softien asennuksiin, tai nostaa ees persettä penkistä.

Täysikokoinen ATX-emolevyllä oleva kone taitaa vaan viedä suunnilleen tuon verran sähköä. Ehkä LGA2011-kanta on vielä hieman syöpömpi, mutta tarvii varmaan olla jotain spessurautaa että pääsisi alle 50 watin.

 

[Ihmemies]

Täysikokoinen ATX-emolevyllä oleva kone taitaa vaan viedä suunnilleen tuon verran sähköä. Ehkä LGA2011-kanta on vielä hieman syöpömpi, mutta tarvii varmaan olla jotain spessurautaa että pääsisi alle 50 watin.

Eli pitäisi vaihtaa johonkin pienen form factorin koneeseen? Tosin siihen sitten on hankalampi saada SSD-levyjä, 10-gigasia verkkokortteja, wifi/bt-kortteja, minkä verran niissä on sata-liittimiä jne :F Ehkä se hinta pitää vaan maksaa. Ei tolla rahalla kuitenkaan saa ees tankkia täyteen vanhaan Audiin..

Jos kk-tasolla ajattelee, niin sähköä menee 15€/kk yhteen servukoneeseen, jos se pelkästään idlaa.

Onko muuten minkälainen työ saada kasa kiintolevyjä truenas:lle näkyviin jos käyttää proxmoxia? Oletan että asia kannattaisi tehdä niin, että levyt näkyvät suoraan truenas:lle, ja truenas luo raid z2 pakan niistä. Ja truenas jakaa dataa muille virtuaalikoneille ja verkossa oleville laitteille.

Eli proxmox ei sekaannu tuohon kiintolevyjen raid-hommaan sen enempää.

 

[Bahamies]

Tällainen C621 + 14core E5 2860 V4 vie muuten ihan saatanasti virtaa. Kun koneessa on virrat "pois päältä", se ottaa 8W seinästä. Ilmeiseti IPMI/BMC jauhaa siellä taustalla. Idlenä 70W Voi vittu, tohon kun muutama levy niin se on 800kWh/v, heh näillä sähkön hinnoilla.

Tämän takia koitin ainakin itse vähän kysellä mitä sillä koneella olet tekemässä. Jos ostaa järeää rautaa, niin pohjakulutus on jo aika raju puhumattakaan sitten rasituksessa tulevista lukemista. Ei siitä tehosta ole mitään iloa, jos sitä ei aio käyttää. Tuo prossu on todella järeä, mutta taas riippuen työkuormasta se ei välttämättä ole i3-prossua parempi (esim. Intel QSV kiihdytetty transkoodaus). Korkeisiin sähkönkulutuksiin kannattaa kuitenkin varautua näissä leikeissä. Omakin mielestäni kevyt homelab kuluttaa idlessä 130W (sis. routerin, pari kytkintä, pari palvelinta levyineen).

Tuohon LGA2011-v3 kantaan kyllä saa halvalla kevyempiä prossuja. E5-1620 v3 ei taida maksaa kuin pari kymppiä Ebaysta ja kyllä sen tehot virtualisointiin riittävät (4C8T), jos nyt ei ihan tolkuttomasti niitä virtuaalikoneita ole pakko pystyttää. Tuolla saa muutaman watin laskettua kokonaiskulutusta ja voit laskea ihan omasta sähkösopparista kauanko tuo ostohinta kestäisi kuolettaa.

 

[Ihmemies]

Tää E5 2860 V4 maksoi siis 81€ saksasta re-it shopista. Aattelin että kun noin halvalla saa prossun, niin otetaan sitten sellainen, tehoa ei ole koskaan liikaa

En minä tiedä mitä tällä olen tekemässä, ostin siis ihan huvikseni testailuun. Siksi kysymykseen on hankala vastata.

Onkohan noista low power-xeoneista iloa? Esim 2630L V4 tai 2650L V4? Niissä TDP on 55W/65W vs tän 2680:n 120W, joten luulisi että niiden idle-kellot ovat niin paljon matalammat, että virrankulutus on pienempää. Tässä 2680V4:ssa on minimikellot 1,2GHz.

 

[Richard]

Tollanen MCC Xeon vie n. 1 W / core idlessä, eli korkea kulutus tulee jostain muualta. Muut palat (IPMI, kaikki päällä olevat turhakkeet kuten verkkokortit joita ei käytä ym) siellä nostaa tuota pohjakulutusta. Omassa kokoonpanossa idle huitelee jossain 150-200 välillä (2 HCC prossua, 2 näytönohjainta, 10G SFP-kortti, 6 levyä + nettirojut (sis. injektorit, modeemi, reititin, 10G SFP-reititin))

Tuohon LGA2011-v3 kantaan kyllä saa halvalla kevyempiä prossuja. E5-1620 v3 ei taida maksaa kuin pari kymppiä Ebaysta ja kyllä sen tehot virtualisointiin riittävät (4C8T), jos nyt ei ihan tolkuttomasti niitä virtuaalikoneita ole pakko pystyttää. Tuolla saa muutaman watin laskettua kokonaiskulutusta ja voit laskea ihan omasta sähkösopparista kauanko tuo ostohinta kestäisi kuolettaa.

Ei kyllä kannata v4:stä päivittää v3:een jos energiatehokkuus on mielessä, varsinkaan malliin jossa on korkea base clock. Ehkä surkein "päivitys" mitä voi tehdä

 

[Joku_242]

Tää E5 2860 V4 maksoi siis 81€ saksasta re-it shopista. Aattelin että kun noin halvalla saa prossun, niin otetaan sitten sellainen, tehoa ei ole koskaan liikaa

En minä tiedä mitä tällä olen tekemässä, ostin siis ihan huvikseni testailuun. Siksi kysymykseen on hankala vastata.

Tuohon LGA2011-v3 kantaan kyllä saa halvalla kevyempiä prossuja. E5-1620 v3 ei taida maksaa kuin pari kymppiä Ebaysta ja kyllä sen tehot virtualisointiin riittävät (4C8T), jos nyt ei ihan tolkuttomasti niitä virtuaalikoneita ole pakko pystyttää. Tuolla saa muutaman watin laskettua kokonaiskulutusta ja voit laskea ihan omasta sähkösopparista kauanko tuo ostohinta kestäisi kuolettaa.

Nopeasti katsottuna E5-1620 v3:lla on korkeampi TDP kuin E5-2860 v4:llä, se on ensimmäisessä 140W ja toisessa 120W. Jos haluaa optimoida sähkönkulutusta, varmaan kannattaa hommata joku L-versio, jossa on matalammat kellot ja jännitteet. Esim. vaikka 2630Lv3 tjsp.

Haswell (microarchitecture) - Wikipedia

en.wikipedia.org

Broadwell (microarchitecture) - Wikipedia

en.wikipedia.org

EDIT: Mutta voi tosiaan olla, että idlessä kulutus tulee muualta kuin prossusta.

 

[Ihmemies]

Tollanen MCC Xeon vie n. 1 W / core idlessä, eli korkea kulutus tulee jostain muualta. Muut palat (IPMI, kaikki päällä olevat turhakkeet kuten verkkokortit joita ei käytä ym) siellä nostaa tuota pohjakulutusta. Omassa kokoonpanossa idle huitelee jossain 150-200 välillä (2 HCC prossua, 2 näytönohjainta, 10G SFP-kortti, 6 levyä)

Ei kyllä kannata v4:stä päivittää v3:een jos energiatehokkuus on mielessä, varsinkaan malliin jossa on korkea base clock. Ehkä surkein "päivitys" mitä voi tehdä

Okei, no pitää selvittää tuota kulutusasiaa. Linuxia en ole juuri käyttänyt, joten vähän on arpomista. Jos laittais vaikka ensinnä VGA-näyttiksen pois päältä jumpperilla (oletan että jumpperi disabloi näyttiksen siis kokonaan, eikä pelkästään sitä takapaneelin d-sub -porttia), sitten IPMI pois päältä jumpperilla jne. Voiskohan osan sata-porteista kytkee pois päältä, viekö nekin virtaa vaikka niissä ei mitään ole kiinni?

Joku tollanen 15W idlekulutus prossulta olis tosi hyvä, sitten enää pitää arpoa mistä loput 55W tulevat Jokainen säästetty 10W on 20€/v sähkölaskussa.

 

[Richard]

Nopeasti katsottuna E5-1620 v3:lla on korkeampi TDP kuin E5-2860 v4:llä, se on ensimmäisessä 140W ja toisessa 120W. Jos haluaa optimoida sähkönkulutusta, varmaan kannattaa hommata joku L-versio, jossa on matalammat kellot ja jännitteet. Esim. vaikka 2630Lv3 tjsp.

Haswell (microarchitecture) - Wikipedia

en.wikipedia.org

Broadwell (microarchitecture) - Wikipedia

en.wikipedia.org

Unohtaa nyt suosiolla nuo v3:t. Niiden ainoa etu on se, että mikrokoodissa olleen bugin ansiosta niitä voi ylikellottaa.

 

[JeanS]

Sain VMWare/Esxi6.7 + TrueNas konffattua ja siinä yksi Pool 3*´8TB (RaidZ1). Lisäksi olisi 2*12TB tyhjää levyä käytössä. Mutta tähän NAS:iin pitäisi saada lisätty vielä 11*12 TB levyä ilman datan hukkaamista. En ole keksinyt muuta keinoa kuin kierrättä data ulkoisten USB levyjen kautta (niitä on 4kpl, yhteensä n. 36TB). Onko mitään helpompaa ja nopeampaa tapaa saada noi loput levyt tähän TrueNAS:iin? Data noissa levyissä ei ole mitään erityisen tärkeää (Chia plotteja), joten en tarvi redundassia noille 12TB levyille (yhteensä 13).

 

[JiiPee]

Okei, no pitää selvittää tuota kulutusasiaa. Linuxia en ole juuri käyttänyt, joten vähän on arpomista. Jos laittais vaikka ensinnä VGA-näyttiksen pois päältä jumpperilla (oletan että jumpperi disabloi näyttiksen siis kokonaan, eikä pelkästään sitä takapaneelin d-sub -porttia), sitten IPMI pois päältä jumpperilla jne. Voiskohan osan sata-porteista kytkee pois päältä, viekö nekin virtaa vaikka niissä ei mitään ole kiinni?

Joku tollanen 15W idlekulutus prossulta olis tosi hyvä, sitten enää pitää arpoa mistä loput 55W tulevat

Et sä merkittävästi sitä kulutusta saa laskettua millään vippaskonsteilla. Se on vaan hyväksyttävä että palvelin ei käy pyhällä hengellä. Sen takia jos tarve on vaan jotain DHCP, DNS, PiHole pyöritystä niin parempia vaihtoehtoja on. olemassa kuin serveri rauta taikka desktop rauta.

 

[JiiPee]

Sain VMWare/Esxi6.7 + TrueNas konffattua ja siinä yksi Pool 3*´8TB (RaidZ1). Lisäksi olisi 2*12TB tyhjää levyä käytössä. Mutta tähän NAS:iin pitäisi saada lisätty vielä 11*12 TB levyä ilman datan hukkaamista. En ole keksinyt muuta keinoa kuin kierrättä data ulkoisten USB levyjen kautta (niitä on 4kpl, yhteensä n. 36TB). Onko mitään helpompaa ja nopeampaa tapaa saada noi loput levyt tähän TrueNAS:iin? Data noissa levyissä ei ole mitään erityisen tärkeää (Chia plotteja), joten en tarvi redundassia noille 12TB levyille (yhteensä 13).

Siis tarkoitus kasvattaa tuota 2x12TB -> 13x12TB?

 

[dome]

Eli pitäisi vaihtaa johonkin pienen form factorin koneeseen? Tosin siihen sitten on hankalampi saada SSD-levyjä, 10-gigasia verkkokortteja, wifi/bt-kortteja, minkä verran niissä on sata-liittimiä jne :F Ehkä se hinta pitää vaan maksaa. Ei tolla rahalla kuitenkaan saa ees tankkia täyteen vanhaan Audiin..

Nuo vie yllättävän paljon sähköä pahimmillaan, varsinkin jos on useita ja erityisesti jos käytössä kuparilinkkejä eikä kuitua. Kannattaa ihan mielenkiinnosta penkittää ilman.

 

[Ihmemies]

Et sä merkittävästi sitä kulutusta saa laskettua millään vippaskonsteilla. Se on vaan hyväksyttävä että palvelin ei käy pyhällä hengellä. Sen takia jos tarve on vaan jotain DHCP, DNS, PiHole pyöritystä niin parempia vaihtoehtoja on. olemassa kuin serveri rauta taikka desktop rauta.

Juu on sitä varten 6300T ja pfsense-kone, se vie 13W. Senkin olis varmaan voinut ostaa mopomman. V8-miehenä vaan vaikea ajatella, että tehoa voi olla jossain laitteessa liikaakin Yksi säästövaihtoehto toki olis laittaa pfsense proxmoxin virtuaalikoneeksi, säästäis ton 13W..

 

[Richard]

Broadwell - Microarchitectures - Intel - WikiChip täältä jos mulkaisee ja välttämättä tahdot rauhtaa vaihtamalla kokeilla laskea kulutusta niin katsele noita LCC (10 corea tai vähemmän) malleja alhaisella base clockilla (2630/Lv4, 40v4) niin saat sen suhteen energiatehokkaimman prossun kyseiselle alustalle.

 

[JeanS]

Siis tarkoitus kasvattaa tuota 2x12TB -> 13x12TB?

Juu. Noista 2*12TB levyistä on tehty jo Pool, mutta voin tuhoa tämän Poolin tarvittaessa koska se on vielä tyhjä. Eli tavoite 13*12TB Pool (joko ilman redundanssaia tai maximissaan yksi levy redundassina). Tai sitten useampi 3-5 levyn Pool.

Toi 3*8TB pool on tarkoitettu valokuvuvien, videoiden yms tallentamiseen, mutta voin käyttää sitäkin väliaikaseen Chia plottien tallennuksen.

 

[JiiPee]

Juu. Noista 2*12TB levyistä on tehty jo Pool, mutta voin tuhoa tämän Poolin tarvittaessa koska se on vielä tyhjä. Eli tavoite 13*12TB Pool (joko ilman redundanssaia tai maximissaan yksi levy redundassina). Tai sitten useampi 3-5 levyn Pool.

Toi 3*8TB pool on tarkoitettu valokuvuvien, videoiden yms tallentamiseen, mutta voin käyttää sitäkin väliaikaseen Chia plottien tallennuksen.

Jos et reduntanttia tartte niin sitten mielestäni btrfs helpoin. Teet noista kahdesta tyhjästä ensin btrfs poolin jossa data typeksi single ja metalle dup. Sen jälkeen kopsaat kahdelta uudelta levyltä rojut sinne pooliin, vedät wipefs:llä ne uudet levyt sileeksi ja sen jälkeen lisäät ne levyt pooliin jonka jälkeen toistat operaation lopuille.
Mutta koska kyseessä on Truenas niin en tiedä siitä juuri mitään että onko siinä edes mahdollista käyttää btrfs. zfs:ssä taitaa poolin kasvatus onnistua myös mutta itte en ole sitä koskaan käyttäny joten en osaa neuvoa miten homma siinä toimii. Mutta jos reduntanttina meinaa tuommosen jumpan vetää niin se tulee viemään aikaa todella kauan koska uusi levy/levyjä kun lisätään reduntantti pooliin niin koko data pitää "jakaa uudelleen kaikille levyille.

 

[Purulumi]

Onko muuten minkälainen työ saada kasa kiintolevyjä truenas:lle näkyviin jos käyttää proxmoxia? Oletan että asia kannattaisi tehdä niin, että levyt näkyvät suoraan truenas:lle, ja truenas luo raid z2 pakan niistä. Ja truenas jakaa dataa muille virtuaalikoneille ja verkossa oleville laitteille.

Eli proxmox ei sekaannu tuohon kiintolevyjen raid-hommaan sen enempää.

Näillä ohjeella onnistuu:

Passthrough Physical Disk to Virtual Machine (VM) - Proxmox VE

pve.proxmox.com

Itse suosin helppouden vuoksi mieluummin HBA korttia.

 

[Ihmemies]

HBA-kortti maksaa Ja tässä emossa on 10 käsittääkseni ihan toimivaa sata-liitäntää. Menisi ns. "rahat hukkaan" (ja sähköt!) jos niitä ei käyttäisi.

 

[Joku_242]

Onko muuten minkälainen työ saada kasa kiintolevyjä truenas:lle näkyviin jos käyttää proxmoxia? Oletan että asia kannattaisi tehdä niin, että levyt näkyvät suoraan truenas:lle, ja truenas luo raid z2 pakan niistä. Ja truenas jakaa dataa muille virtuaalikoneille ja verkossa oleville laitteille.

Eli proxmox ei sekaannu tuohon kiintolevyjen raid-hommaan sen enempää.

Entä jos hostiksi laittaisi jonkun käyttiksen, joka toimii hypervisorina ja käyttää suoraan zfs:ää? Tällöin NAS-hommat hoituisi suoraan hostilta ja virtuaalikoneille voisi vaan antaa zfs-volyymejä?

 

[JiiPee]

HBA-kortti maksaa Ja tässä emossa on 10 käsittääkseni ihan toimivaa sata-liitäntää. Menisi ns. "rahat hukkaan" (ja sähköt!) jos niitä ei käyttäisi.

Kantsii tsekata että miten ne 10 sata porttia on toteutettu. Voi olla että ne ei ole saman kontrollerin takana. Esim. omassa crosshair 6 Hero emossa on 8 ja 2 niistä on eri ohjaimen takana, joten tuolla emolla voisi antaa virtuaalikoneelle joko 2 taikka 6 sata portti suoraan passthrough.

Entä jos hostiksi laittaisi jonkun käyttiksen, joka toimii hypervisorina ja käyttää suoraan zfs:ää? Tällöin NAS-hommat hoituisi suoraan hostilta ja virtuaalikoneille voisi vaan antaa zfs-volyymejä?

Tää on se jota itte suosin. Hostilla poolin hallinta ja virtuaalikoneille teen lvm thin poolin kanssa "kovalevyn". Virtio:n kanssa tuosta ei synny juuri mitään penaltii edes. Tosin windows guestia jos ajelee niin virtio ei ole suoraan vaihtoehto, mutta tein ittelle win11 iso imagen johon on noi virtio ajurit uitettu mukaan niin sen kanssa saa windowsin pystyyn myös virtio:n kanssa.

 

[Richard]

Kantsii tsekata että miten ne 10 sata porttia on toteutettu. Voi olla että ne ei ole saman kontrollerin takana. Esim. omassa crosshair 6 Hero emossa on 8 ja 2 niistä on eri ohjaimen takana, joten tuolla emolla voisi antaa virtuaalikoneelle joko 2 taikka 6 sata portti suoraan passthrough.

Tuollainen Supermicro ei ole mitään pilipalikuluttajapaskaa vaan siinä on 6+4 Intelin SATA-kontrollerista tulevaa porttia. Noi pystyy teoriassa kyllä jakamaan eteenpäin tuolla splitillä, esim. omassa toosassa

00:11.4 SATA controller [0106]: Intel Corporation C610/X99 series chipset sSATA Controller [AHCI mode] [8086:8d62] (rev 05)
00:1f.2 SATA controller [0106]: Intel Corporation C610/X99 series chipset 6-Port SATA Controller [AHCI mode] [8086:8d02] (rev 05)

ja ovat vieläpä omissa IOMMU-groupeissa.

 

[Bahamies]

Ei kyllä kannata v4:stä päivittää v3:een jos energiatehokkuus on mielessä, varsinkaan malliin jossa on korkea base clock. Ehkä surkein "päivitys" mitä voi tehdä

Unohtaa nyt suosiolla nuo v3:t. Niiden ainoa etu on se, että mikrokoodissa olleen bugin ansiosta niitä voi ylikellottaa.

Onko sinulla jotain vertailua heittää v3 ja v4 sukupolvista? Itse kun palvelinta kasailin ja koitin tietoa etsiä, niin erot eivät muistaakseni mitenkään järkyttävän suuret olleet. V4 on arkkitehtuuriltaan parempi, mutta käy aavistuksen pienemmillä kelloilla kuin v3 ja jos vertaillaan vastaavia tuotteita niin erot jäivät tehoissa melko pieniksi v4:n eduksi. Tehonkulutuksessakaan ei käsittääkseni mitään oikeasti merkittävää eroa ollut. Muutama watti sinne tänne.

Broadwell - Microarchitectures - Intel - WikiChip täältä jos mulkaisee ja välttämättä tahdot rauhtaa vaihtamalla kokeilla laskea kulutusta niin katsele noita LCC (10 corea tai vähemmän) malleja alhaisella base clockilla (2630/Lv4, 40v4) niin saat sen suhteen energiatehokkaimman prossun kyseiselle alustalle.

Itse olen tästäkin saanut vähän eriävän kuvan. Nuo L-tyyppiset prossut eivät idlessä juurikaan laske kulutusta, täydessä rasituksessa niiden maksimikulutus on pienempi, kun base clockit ovat alemmat, mutta saman tehtävän suoritus kestää pidempään. Jos siis käytetään 80W ja tehtävä kestää tunnin tai 160W ja tehtävä kestää 30min, niin kokonaiskulutus on sama. Sama toistuu pienemmässäkin mittakaavassa ja rasituksessa. Säästääkö noilla siis todella oikeasti kovinkaan paljon kokonaiskulutuksessa? Onko noiden hyötysyhde lopulta parempi? Itse meinasin jo tuollaisen L-mallisen Xeonin joskus tilata, mutta muistaakseni Servethehome foorumeilla ei noista juurikaan pidetty em. syistä.

 

[Richard]

Onko sinulla jotain vertailua heittää v3 ja v4 sukupolvista? Itse kun palvelinta kasailin ja koitin tietoa etsiä, niin erot eivät muistaakseni mitenkään järkyttävän suuret olleet. V4 on arkkitehtuuriltaan parempi, mutta käy aavistuksen pienemmillä kelloilla kuin v3 ja jos vertaillaan vastaavia tuotteita niin erot jäivät tehoissa melko pieniksi v4:n eduksi. Tehonkulutuksessakaan ei käsittääkseni mitään oikeasti merkittävää eroa ollut. Muutama watti sinne tänne.

No ihan samaa peruskamaahan ne on, suurin ero on tuo valmistuksen viivanleveys. Käsittääkseni kuitenkin puhutaan kymmenistä wateista eikä vain muutamista. Hintaeron ollessa naurettava niin ainahan kannattaa valita energiatehokkaampi eli uusin vaihtoehto? Varsinkin jos unohtaa tuon kellotusräpeltämisen.

Itse olen tästäkin saanut vähän eriävän kuvan. Nuo L-tyyppiset prossut eivät idlessä juurikaan laske kulutusta, täydessä rasituksessa niiden maksimikulutus on pienempi, kun base clockit ovat alemmat, mutta saman tehtävän suoritus kestää pidempään. Jos siis käytetään 80W ja tehtävä kestää tunnin tai 160W ja tehtävä kestää 30min, niin kokonaiskulutus on sama. Sama toistuu pienemmässäkin mittakaavassa ja rasituksessa. Säästääkö noilla siis todella oikeasti kovinkaan paljon kokonaiskulutuksessa? Onko noiden hyötysyhde lopulta parempi? Itse meinasin jo tuollaisen L-mallisen Xeonin joskus tilata, mutta muistaakseni Servethehome foorumeilla ei noista juurikaan pidetty em. syistä.

No nämähän on niin hitaita ettei näitä oikein voi perustella kuin niche-vaatimuksilla (esim. PCIE-väylien, validoitu ECC-tuki tai kunnollisten SATA-porttien lukumäärillä yhdistettynä halpaan hankintahintaan) mutta jos haluaa saada sen pienimmän mahdollisen kulutuksen niin LCC-core (eli vähiten ylimääräisiä trankkuja ylipäätänsä) on käytännössä paras valinta. Riippuu ihan siitä workloadista käykö noin että kone hakkaa virtarajoitusta vasten vai ei. Arvioisin että NAS-käytössä riittää hyvin.

 

[Ihmemies]

Proxmox ei tarvitse noita sata-liittimiä, kun proxmox ja virtuaalikoneet ovat m.2 ssd:llä. Pitää katsoa miten onnistun nuo sata-liittimet antamaan suoraan virtuaalikoneen käyttöön trruenas:lle.

 

[Richard]

Proxmox ei tarvitse noita sata-liittimiä, kun proxmox ja virtuaalikoneet ovat m.2 ssd:llä. Pitää katsoa miten onnistun nuo sata-liittimet antamaan suoraan virtuaalikoneen käyttöön trruenas:lle.

Pitäisi kyllä sitten onnistua ihan suoraan UI:sta kliksuttelemalla.

 

[Bahamies]

No ihan samaa peruskamaahan ne on, suurin ero on tuo valmistuksen viivanleveys. Käsittääkseni kuitenkin puhutaan kymmenistä wateista eikä vain muutamista. Hintaeron ollessa naurettava niin ainahan kannattaa valita energiatehokkaampi eli uusin vaihtoehto? Varsinkin jos unohtaa tuon kellotusräpeltämisen.

No nämähän on niin hitaita ettei näitä oikein voi perustella kuin niche-vaatimuksilla (esim. PCIE-väylien, validoitu ECC-tuki tai kunnollisten SATA-porttien lukumäärillä yhdistettynä halpaan hankintahintaan) mutta jos haluaa saada sen pienimmän mahdollisen kulutuksen niin LCC-core (eli vähiten ylimääräisiä trankkuja ylipäätänsä) on käytännössä paras valinta. Riippuu ihan siitä workloadista käykö noin että kone hakkaa virtarajoitusta vasten vai ei. Arvioisin että NAS-käytössä riittää hyvin.

Muuten kaikesta samaa mieltä, mutta tuo v3 vs. v4 on kyllä jännä aihe. Itsekin pitkään etsin tietoa noiden todellisista eroista virrankulutuksen suhteen ja ellei nyt puhuta aivan malliston yläpäästä, niin mitään oman kodin sähkönkulutuksen kannalta oleellisia eroja en noiden prossujen väliltä löytänyt. Broadwellhän oli ainakin kuluttajapuolella arkkitehtuurina floppi, kun se ei juurikaan tuonut mitään oleellisia käytössä näkyviä parannuksia Haswelliin verraten.

Se tosin on ihan totta, että mitään järkeä v3:ssa ei ole jos v4 maksaa saman verran. Vuosi sitten kun näitä viimeksi katsoin niin hintaeroa oli vielä jonkin verran, mutta eiköhän nämä kaikki ole kohta halpoja sähkön hinna takia. Tosin se että nämä v3 ja v4 prossut menevät samaan kantaan tarkoittaa väkisinkin sitä, että mitä järisyttäviä eroja on vaikea saada aikaan, kun prossu on vain osa koko alustan kulutusta. Eli sinällään hiusten halkomista koko homma.

 

[Ihmemies]

2011 on suht halpa kanta verrattuna siihen uuteen 3670 tms. Siihen maksavat emot ja prossut niin paljon, että mieluummin ehkä maksaa vain sähköstä. Pitäis joskus selvittää, millaista energiatehokasta servurautaa saa. Kai nyt sellaistakin tehdään, kun todella pihiä ei-servurautaa ainakin saa hyvin edullisesti.

Edit: vielä voisi selvittää, miten saisi laatikoista n kpl kiintolevyjä arkistoitua NAS:lle. Vissiin sata-liitäntä kaikissa paitsi yhdessä. Jokin USB3-kotelo ulkoisella powerilla, ja yksi kerrallaan vaihtaa levyä ja jollain softalla kopioi datan?

Levyt toimii tai sitten ei, dataa saa talteen sieltä tai ei. Mutta kiinnostaisi ottaa talteen se mitä saa, ja sen jälkeen nollata levyt ja heittää serriin koko kasa. Edit2: varmaan tollanen toimis ihan ok: Kolink Ulkoinen kiintolevykotelo 3.5" -kiintolevylle, USB 3.0, musta - 19,90€

 

[bindi]

@Ihmemies

Proxmox cpu governor on oletuksena "performance" eli kellot ovat jatkuvasti maksimit, vakauden takia. Olikohan Windows tai FreeBSD virtuaalikoneet jotka saattoivat kyykätä, jos hostilla oli käytössä virransäästöjä. Voit seurata kelloja tällä komennolla: watch -n 1 grep MHz /proc/cpuinfo
Intelillä jos on käytössä driverinä intel_pstate niin vaihtoehtoina on performance tai powersave, jos muistan oikein. powersave ei ole sama kuin acpi-cpufreqin powersave jossa kellot ovat jatkuvasti minimit, vaan se on enemmänkin kuin acpi-cpufreqin schedutil.

Tarkista nykyinen governor: cat /sys/devices/system/cpu/cpu0/cpufreq/scaling_governor
Vaihda powersaveen: echo "powersave" | tee /sys/devices/system/cpu/cpu*/cpufreq/scaling_governor

Seuraa uudestaan kelloja aikaisemmalla watch-komennolla ja varmista että toimii kuten pitääkin.

Lisää pysyväksi muutokseksi muokkaamalla tiedostoa /etc/kernel/cmdline lisäämällä sinne cpufreq.default_governor=powersave ja sen jälkeen aja komento proxmox-boot-tool refresh

Kerrohan jos tuli säästöjä, tein saman operaation omalle proxmox-palvelimelle mutta en ole saanut tehonkulutusmittaria väliin vielä. Itsellä myös käytössä uutta Ryzeniä niin pitää odotella uudempaa kerneliä jolloin saa käyttöön amd-pstate driverin, nyt on vain tuo yleismallisempi acpi-cpufreq. Se on kyllä proxmoxilla previewissä (Opt-in Linux 5.19 Kernel for Proxmox VE 7.x available) mutta odottelen vakaata julkaisua heiltä.

 

[Ihmemies]

Eipä tuosta ollut iloa. Kokeilin cpufrequtilssilla asiaa jo eilen. Ei ole mittari värähtänytkään alle 70W:n.

cpufrequtils 008: cpufreq-info (C) Dominik Brodowski 2004-2009
Report errors and bugs to cpufreq@vger.kernel.org, please.
analyzing CPU 0:
  driver: intel_cpufreq
  CPUs which run at the same hardware frequency: 0
  CPUs which need to have their frequency coordinated by software: 0
  maximum transition latency: 20.0 us.
  hardware limits: 1.20 GHz - 3.30 GHz
  available cpufreq governors: conservative, ondemand, userspace, powersave, performance, schedutil
  current policy: frequency should be within 1.20 GHz and 3.30 GHz.
                  The governor "ondemand" may decide which speed to use
                  within this range.
  current CPU frequency is 1.20 GHz.

x 28... on oletuksena. Eli se idlaa 1,2GHz eikä powersave sitä kulutusta enää vähennä. VGA-jumpperia siirtämällä virtaa ei myöskään säästynyt yhtään. Kai se pitää luovuttaa ja todeta, että tää vaan vie sen 70W, vaikka koneessa on kii vaan prossu, 5 tuuletinta, 1 m.2 ssd, bt-kortti ja 2 muistikapulaa...

Powertopilla on myös kasa asetuksia joita voi säätää, pitäisi jaksaa yksi kerrallaan kokeilla, auttaako mikään mihinkään:

 

[muumio]

Kerran siulla on tuollasta rautaa niin saatat saaha pystymään antaa koko ohjaimen sellaisenaan virtuaalille jos on omassa IOMMU groupissaan.

Tarkasta vaikka jollain tuommosella skriptillä

#!/usr/bin/env bash
shopt -s nullglob

for d in /sys/kernel/iommu_groups/*/devices/*; do
        n=${d#*/iommu_groups/*}; n=${n%%/*}
        printf 'IOMMU %02d ' "$n"
        lspci -nns "${d##*/}"
 done

 

[dun]

Mä ostin aikoinaan Supermicron Mini-ITX emon tarkoituksella 3000-sarjan epyc AMD prossulla että on ECC, 8c/16c prossu ja IPMI jotka vain toimii. Suomesta hommasin. Tosin maksoi 2019 n. 1000€ muisteineen (64GB, lisäsin myöhemmin toiset 64GB lisää).

HBA pci-e 3.0 8x + 2 SSD + 8 x 5400rpm normi käytössä vetää 75-77W virtaa. Maksimiteholla taitaa pompata 80W, mutta toi kone ei koskaan idlaa, niin vaikea laskea idle tehoja.Tolle on luvattu yhdellä levyllä maksimirasitus 40-50W,joten pitää hyvinkin varmaan paikkansa toi 75-77W missä pyöri kun viimeeksi mittasin.

Eli et tuu koskaan maksamaan sähkössä varmaan takaisin erotusta noihin low voltage xeoneihin / epyceihin jos uutena joudut ostamaan ja käytettynä on vähän arpapeliä mitä saa. Voi toimia seuraavat 5-6 vuotta ongelmitta tai laueta seuraavana päivän. Käytetyllä raudalla takuuta noissa ei yleensä enää ole.

 

[Ihmemies]

Vitun vittu kun ei bluetooth toimi.

root@pve:~# dmesg | grep -i bluetooth
[ 4.337453] Bluetooth: Core ver 2.22
[ 4.337550] NET: Registered PF_BLUETOOTH protocol family
[ 4.337552] Bluetooth: HCI device and connection manager initialized
[ 4.337557] Bluetooth: HCI socket layer initialized
[ 4.337560] Bluetooth: L2CAP socket layer initialized
[ 4.337565] Bluetooth: SCO socket layer initialized
[ 4.344402] Bluetooth: hci0: Bootloader revision 0.1 build 42 week 52 2015
[ 4.345469] Bluetooth: hci0: Device revision is 2
[ 4.345471] Bluetooth: hci0: Secure boot is enabled
[ 4.345472] Bluetooth: hci0: OTP lock is enabled
[ 4.345473] Bluetooth: hci0: API lock is enabled
[ 4.345474] Bluetooth: hci0: Debug lock is disabled
[ 4.345475] Bluetooth: hci0: Minimum firmware build 1 week 10 2014
[ 4.345960] Bluetooth: hci0: Failed to load Intel firmware file intel/ibt-18-16-1.sfi (-2)
[ 4.347451] Bluetooth: hci0: Failed to read MSFT supported features (-56)
[ 6916.457880] Bluetooth: BNEP (Ethernet Emulation) ver 1.3
[ 6916.457886] Bluetooth: BNEP filters: protocol multicast
[ 6916.457891] Bluetooth: BNEP socket layer initialized

Debian -- Details of package firmware-iwlwifi in buster

packages.debian.org

* Intel Wireless 9160/9260 (var 16 rev 1) Bluetooth firmware, version
21.30.0.4 (intel/ibt-18-16-1.sfi)

root@pve:/lib/firmware/intel# apt-get install firmware-iwlwifi
Reading package lists... Done
Building dependency tree... Done
Reading state information... Done
Package firmware-iwlwifi is not available, but is referred to by another package.
This may mean that the package is missing, has been obsoleted, or
is only available from another source
However the following packages replace it:
  pve-firmware

E: Package 'firmware-iwlwifi' has no installation candidate

....

root@pve:~# apt-file list pve-firmware
root@pve:~# apt-file list xterm
xterm: /etc/X11/app-defaults/KOI8RXTerm
xterm: /etc/X11/app-defaults/KOI8RXTerm-color
xterm: /etc/X11/app-defaults/UXTerm
xterm: /etc/X11/app-defaults/UXTerm-color
xterm: /etc/X11/app-defaults/XTerm
xterm: /etc/X11/app-defaults/XTerm-color

........................

???? Mites ton bt-kikkareen firmwaren saa nyt saatana asennettua.

Edit: lataamalla paketin, purkamalla manuaalisesti fileet, kopioimalla manuaalisesti, reboottaamalla paskan:

root@pve:~#  dmesg | grep -i bluetooth
[    4.515183] Bluetooth: Core ver 2.22
[    4.515208] NET: Registered PF_BLUETOOTH protocol family
[    4.515209] Bluetooth: HCI device and connection manager initialized
[    4.515214] Bluetooth: HCI socket layer initialized
[    4.515216] Bluetooth: L2CAP socket layer initialized
[    4.515219] Bluetooth: SCO socket layer initialized
[    4.621477] Bluetooth: hci0: Bootloader revision 0.1 build 42 week 52 2015
[    4.622711] Bluetooth: hci0: Device revision is 2
[    4.622715] Bluetooth: hci0: Secure boot is enabled
[    4.622717] Bluetooth: hci0: OTP lock is enabled
[    4.622718] Bluetooth: hci0: API lock is enabled
[    4.622720] Bluetooth: hci0: Debug lock is disabled
[    4.622721] Bluetooth: hci0: Minimum firmware build 1 week 10 2014
[    4.623849] Bluetooth: hci0: Found device firmware: intel/ibt-18-16-1.sfi
[    4.939508] Bluetooth: BNEP (Ethernet Emulation) ver 1.3
[    4.939511] Bluetooth: BNEP filters: protocol multicast
[    4.939514] Bluetooth: BNEP socket layer initialized
[    6.126509] Bluetooth: hci0: Waiting for firmware download to complete
[    6.127522] Bluetooth: hci0: Firmware loaded in 1468426 usecs
[    6.127589] Bluetooth: hci0: Waiting for device to boot
[    6.141522] Bluetooth: hci0: Device booted in 13638 usecs
[    6.141658] Bluetooth: hci0: Found Intel DDC parameters: intel/ibt-18-16-1.ddc
[    6.143602] Bluetooth: hci0: Applying Intel DDC parameters completed
[    6.146575] Bluetooth: hci0: Firmware revision 0.1 build 168 week 48 2020
[    6.205522] Bluetooth: hci0: MSFT filter_enable is already on
root@pve:~# bluetoothctl
Agent registered
[CHG] Controller BC:54:2F:CC:9E:B6 Pairable: yes
[bluetooth]# list
Controller BC:54:2F:CC:9E:B6 pve [default]

 

[Ihmemies]

4 18-teraista Toshiba MG09:ää tuli. Ajattelin laittaa ne Truenas OpenZFS Z2 raidiin. 50% tilasta menee hukkaan. OpenZFS 3:ssa voi lisätä vdeviin levyn, jonka jälkeen vain 40% tilasta menee hukkaan uutta dataa kirjoittaessa. Vanha data hukkaa edelleen 50% tilasta, ellei sitä kirjoita vdeville uudelleen.

Levyt ovat yllättävän hiljaisia. Kone on kirjahyllyssä samassa huoneessa, ja smart long self-testiä ajaessa ei ainakaan kuulu mitään ääntä omalle istumapaikalle. Ehkä jonkinlaisissa r/w operaatioissa kuuluu sitten ääntä, pitää testailla kun pääsee sinne asti. Define R5 resonoi keskeltä pohjasta välillä, joten laitoin siihen bitumimattoa palan.

Mielenkiintoisesti yksi levy piti sellaista THUNK THUNK heartbeat tyylistä ääntä muutaman minuutin, eikä näkynyt linuxissa. Sitten ääni loppui ja levy tuli näkyviin. Smart-infot ja short test ei sanonut mistään levystä mitään.

Hinta oli vissiin 316€/kpl jacob.de:stä.

2.5-gigasen verkkokortin voisi vielä hankkia. Nopeampi todennäköisesti menee hukkaan näillä levyillä, ellei ryhdy jotain nvme cachea käyttämään.

 

[Ihmemies]

Seuraavaksi kyllä kiinnostaa, että miksi yksi neljästä levystä teki tota heartbeat ääntä lukupäällä tms. Levy paskana? Voiko sen vaan palauttaa ja pyytää uutta syyllä "piti jännää ääntä ekassa bootissa"?

Edit: vie muuten paljon virtaa long smart testiä tehdessä. 130W+. Idlenä ilman levyjä oli 70W. Levyt vie paperilla r/w operaatioissa 8.4W kappale eli jonkun 34W yhteensä. Jostain tulee vielä vähän lisää. Ei oo halpaa tämä nasseilu

 

[Satelite]

Onko mitään hyötyä käyttää Synology DS918+:ssa link aggregationia? Tällä ilmeisesti saisi joko a) varmemman yhteyden tai b) nopeamman yhteyden (1 gigaa vs. 2 gigaa).

Oltava sitten tuki molemmissa päissä eli jollain perus ei-hallittavalla halpakytkimellä tuota ei käyttöön oteta.

 

[Nurffe]

Miettinyt tässä nas-koneen rakentelemista nurkkiin ja ajattelin kysäistä täältä josko tässä nyt on jotain suurempia pitfalleja kun en ole niin paljoa kerennyt asiaan perehtyä

Joku Mini-ITX AM4 emolevy
3000G prossu
120G SSD käyttislevy
5x8TB HDD storagelevyt
8-16GB DDR4 (ecc ei taida maistua tuolle kivellä )
M.2-SATA III extender / PCI-SATA III extender (tarvii sen 6x SATA III jo näille joten..)

3000G koska semmoinen olisi saatavilla ja sen vuoksi jostain AM4 levy kaveriksi, pahimmillaan uutena kun niitä on kuitenkin saatavana. Elättelen myös toiveita että saan 3000G kivestä integroidulta grafiikkapiiriltä kuvaa sen verran että saa käyttiksen asennettua kun ei tällä hetkellä ylimääräsiä gpu-kortteja makaa nurkissa
Vähän truenas raidz1/z2 silmäillyt, mutta en ole päättänyt vielä. Ja mites tuo L2ARC, kannattaneeko tuohon heittää joku nopeahko ssd levy kaveriksi vaiko eikö?

Sen verta lueskelin että täällä paljon on puhuttu virtualisoinnista ja proxmoxista. Minkä takia? En ihan ymmärtänyt miksi porukka haluaa pyörittää virtuja nassilla vai onko ideana että nas-konwrr käytetään jonain generic servuna jossa pyöritetään vähän mitä sattuu?

 

[JiiPee]

Seuraavaksi kyllä kiinnostaa, että miksi yksi neljästä levystä teki tota heartbeat ääntä lukupäällä tms. Levy paskana? Voiko sen vaan palauttaa ja pyytää uutta syyllä "piti jännää ääntä ekassa bootissa"?

Ootko varma että se oli yks levy? Meinaan ittellä 5kpl hitachin levyjä ja bootti kestää jonkin aikaa kun ajelee ne yksi kerrallaan käyntiin. Mielestäni noi 6kpl WD Red laikkoja ei tätä jostain syystä tee vaan ne pyörähtää samoin tein käyntiin tai ei niistä ainakaan huomaa mitään. Noi hitashit kuulee selvästi kun levy käynnistyy ja noin 10sec jälkeen käynnistyy seuraava jne.
Toi on sitä varten ettei tule liian isoa piikkiä virrankulutuksessa kun on paljon levyjä. Noi sähkömoottorit (ihan yleisesti) kun haukkaa käynnistyessään moninkertaisen määrän virtaa.

 

[Timo 2]

Miettinyt tässä nas-koneen rakentelemista nurkkiin ja ajattelin kysäistä täältä josko tässä nyt on jotain suurempia pitfalleja kun en ole niin paljoa kerennyt asiaan perehtyä

Joku Mini-ITX AM4 emolevy
3000G prossu
120G SSD käyttislevy
5x8TB HDD storagelevyt
8-16GB DDR4 (ecc ei taida maistua tuolle kivellä )
M.2-SATA III extender / PCI-SATA III extender (tarvii sen 6x SATA III jo näille joten..)

3000G koska semmoinen olisi saatavilla ja sen vuoksi jostain AM4 levy kaveriksi, pahimmillaan uutena kun niitä on kuitenkin saatavana. Elättelen myös toiveita että saan 3000G kivestä integroidulta grafiikkapiiriltä kuvaa sen verran että saa käyttiksen asennettua kun ei tällä hetkellä ylimääräsiä gpu-kortteja makaa nurkissa
Vähän truenas raidz1/z2 silmäillyt, mutta en ole päättänyt vielä. Ja mites tuo L2ARC, kannattaneeko tuohon heittää joku nopeahko ssd levy kaveriksi vaiko eikö?

Sen verta lueskelin että täällä paljon on puhuttu virtualisoinnista ja proxmoxista. Minkä takia? En ihan ymmärtänyt miksi porukka haluaa pyörittää virtuja nassilla vai onko ideana että nas-konwrr käytetään jonain generic servuna jossa pyöritetään vähän mitä sattuu?

Tarviit pro sarjan apun, jotta saat prosulta kuvaa ulos sekä ecc tuen. Ryzenin igpu riittää hyvin tähän tarkoitukseen. Tarviit vain emon, jossa on näyttöulostulo(ja ecc tuki jos ecc muistit kiinnostaa).

 

[Ihmemies]

Ootko varma että se oli yks levy? Meinaan ittellä 5kpl hitachin levyjä ja bootti kestää jonkin aikaa kun ajelee ne yksi kerrallaan käyntiin. Mielestäni noi 6kpl WD Red laikkoja ei tätä jostain syystä tee vaan ne pyörähtää samoin tein käyntiin tai ei niistä ainakaan huomaa mitään. Noi hitashit kuulee selvästi kun levy käynnistyy ja noin 10sec jälkeen käynnistyy seuraava jne.
Toi on sitä varten ettei tule liian isoa piikkiä virrankulutuksessa kun on paljon levyjä. Noi sähkömoottorit (ihan yleisesti) kun haukkaa käynnistyessään moninkertaisen määrän virtaa.

Noh, en. Ihmettelin hetken asiaa koneen äärellä, ja siirryin sitten pelikoneelle googlailemaan. System logia lukiessa näemmä kaikki levyt kyllä tunnistuivat samaan aikaan. Ehkä tuo sitten on vaan normaalia. Jos pitkä smart test menee läpi, niin teen huomenna vdevin noista, ja heitän sinne dataa. Kaipa zfs sitten kertoo, jos levyissä jotain häikkää on.

 

[JiiPee]

Noh, en. Ihmettelin hetken asiaa koneen äärellä, ja siirryin sitten pelikoneelle googlailemaan. System logia lukiessa näemmä kaikki levyt kyllä tunnistuivat samaan aikaan. Ehkä tuo sitten on vaan normaalia. Jos pitkä smart test menee läpi, niin teen huomenna vdevin noista, ja heitän sinne dataa. Kaipa zfs sitten kertoo, jos levyissä jotain häikkää on.

Vetäsehän kylmä bootti ja kuuntele korvat oikein isosti höröllään, voipi olla että tekee samaa kuin ittellä että ajelee levyjä yksi kerrallaan ylös.

Joskushan kovalevyissä oli ihan jumpperi jolla sai päälle/pois delay startin. Nykyään se on ilmeisesti aika pitkälti automaattinen. Sen tarkemmin en ole perehtynyt että mitenkä se toimii. Oliskohan siinä joku systeemi että väylän kättelyssä levy osaa tunnistaa jotta monennessako portissa on kiinni ja sen mukaan sitten säätää start delayn, vai onko peräti hienostuneempi systeemi tuossa taustalla ja levy aina kertoo että nyt ollaan valmiina jolloin ohjain pyytää seuraavaa levyä käynnistymään mikäli toi tuki levystä löytyy.

 

[Ihmemies]

Mikähän olis halvin vaihtoehto saada nopea yhteys servun ja pöytäkoneen välille? Win11 ja linux 5. jotain vissiin käytössä. Ebayn halvin : IBM Mellanox ConnectX - 2 VPI HC Adapter QSFP QDR 10GbE HC Adapter 81Y1533 HCA | eBay

Mikähän tuokin lienee? Pystyykö tuota käyttämään ainoastaan virtuaalikoneilla jollain spesifillä raudalla? Millaisia kortteja kannattaisi ostaa?

Vai onko toi liian vanha, ei toimi, ei saa ajureita, ja jotain tollasia pitäisi ostaa? Mellanox ConnectX - 3 PCIe x4 NIC 10 Gigabit 10GBe SFP + CX311A Server Adapter | eBay

 

[JiiPee]

Mikähän olis halvin vaihtoehto saada nopea yhteys servun ja pöytäkoneen välille? Win11 ja linux 5. jotain vissiin käytössä. Ebayn halvin : IBM Mellanox ConnectX - 2 VPI HC Adapter QSFP QDR 10GbE HC Adapter 81Y1533 HCA | eBay

Mikähän tuokin lienee? Pystyykö tuota käyttämään ainoastaan virtuaalikoneilla jollain spesifillä raudalla? Millaisia kortteja kannattaisi ostaa?

Vai onko toi liian vanha, ei toimi, ei saa ajureita, ja jotain tollasia pitäisi ostaa? Mellanox ConnectX - 3 PCIe x4 NIC 10 Gigabit 10GBe SFP + CX311A Server Adapter | eBay

Toi vaatii sitte oman kaapelinsa. On siellä vajaalla satkulla paketteja jossa 2 korttia ja piuha, mutta kyllä itte menisin ihan RJ-45 kanssa tai sitten kuitu vehkeillä. Niitä on huomattavasti helpompi naittaa mahdolliseen 10 gigaseen kytkimeen tulevaisuudessa.

 

[Ihmemies]

Toi vaatii sitte oman kaapelinsa. On siellä vajaalla satkulla paketteja jossa 2 korttia ja piuha, mutta kyllä itte menisin ihan RJ-45 kanssa tai sitten kuitu vehkeillä. Niitä on huomattavasti helpompi naittaa mahdolliseen 10 gigaseen kytkimeen tulevaisuudessa.

Ongelmana kun on, että en oikein tarkalleen tiedä millaista pitäisi ostaa. RJ-45 maksaa ainakin hunajaa. Eikö nuo mun linkkaamat oo just kuitua? Onko kuitu sitten eri asia kuin noi mun linkkaamat? Mitä tässä pitäis oikein ostaa, jos haluaa nopean verkkoyhteyden kahden koneen välille?

 

[kmot]

Jos koneet vierekkäin, niin DAC-kaapelilla. Jos kauempana, niin OM3-kuidulla ja SFP+ moduulit kumpaankin korttiin. Itsellä noita ConnectX -kortteja, tosin kakkosia. Kolmoset uudempia ja parempia.

Itselläni tällainen kytkin https://www.dustinhome.fi/product/5011178214/xgs1210-multi-gig-switch ja muutamia noita kortteja, osa DAC-kaapelilla (pari konetta kytkettynä toisiinsa) ja osa kuidulla.