DIY Serriserveri 36c/72t, 512Gb RAM

  • Keskustelun aloittaja Keskustelun aloittaja V31751
  • Aloitettu Aloitettu
V

V31751

Liittynyt
11.06.2020
Viestejä
46
Operaatio serriserveri työn alla 😎

Emolevynä: Huananzhi X10X99-16D
Prossuina: Xeon 2696V3 x2 eli 36c/72t @ 2,3-3,6Ghz
RAM: 16x32gb, 512gb ( kiitos käyttäjälle @Jarkko kaupoista!)
Tallennus: Corsair MP600 2 teraa
Jäähdytys: ilma

Emolevyn kiinnitys ei ollut standardi E-ATX. 4 kiinnityspulttia sopi suoraan, mutta loppuihin tein kierteet itse. Samaten maalasin rungon paukku maalilla matta mustaksi.

IMG20250118183618.jpg


IMG20250118185125.jpg


IMG20250118185136.jpg


IMG20250118184133.jpg


IMG20250120170930.jpg


IMG20250120171154.jpg


IMG20250120171215.jpg


IMG20250120171143.jpg


IMG20250120183112.jpg


IMG20250120191317.jpg
 
Ei toivoakaan saada tuota emolevyn virtakaapelia yltämään paikalleen, kun pitäis prossujäähytkin saada mahtuun. CPU virrat saan varmaan emolevyn alta ujutettua, mutta täytynee lähteä metsästämään jotain jatkoadapteria tohon.. joskus oon jatkoja tehnyt kolvaamalla, mutta ihan uusi virtalähde niin ei oikeen viitsisi.

IMG20250126184242.jpg
 
Desgorr sanoi:
Jos tosiaan ollaan serveriä väsäilemässä ja Windowsin haluat, niin suosittelen myös kurkkaamaan Windows Server 2025 suuntaan :tup:
Napsauta laajentaaksesi...
Pitää vilkasta :thumbsup: Windows 11 Pro Workstations on kans olemassa, mutta ei tässä sentään RAM raja tuu vastaan, että sen takia tarvis :D
 
Onkohan tuo kuinka riski vetää nuo CPU virrat tylysti emolevyn alta? Jos sattuu vaikka joku kolvauspinni pohjasta vääntymään ja iskeekin oikosulkua :hmm:

IMG20250127120923.jpg


IMG20250127120928.jpg


IMG20250127120933.jpg


IMG20250127120938.jpg
 
V31751 sanoi:
Pitää vilkasta :thumbsup: Windows 11 Pro Workstations on kans olemassa, mutta ei tässä sentään RAM raja tuu vastaan, että sen takia tarvis :D
Napsauta laajentaaksesi...
Makuasioita toki kotikäytössä, mutta löytyy mm. paremmat hallintatyökalut juurikin palvelinkäyttöä ajatellen, kontit, Windows admin center, ei ole 20 samanaikaisen sisäänpäin tulevan SMB-yhteyden rajoitusta (Toki kotikäytössä ei nyt niin merkitystä), järeämpi versio Hyper-V:stä, ei tule turhaa tauhkaa mukana, ReFS, jne...
Ominaisuuksia voi myös lisätä ja poistaa sitä mukaa kun tarvitsee.

Joka tapauksessa, hieno projekti :tup:
 
Viimeksi muokattu:
Desgorr sanoi:
Makuasioita toki kotikäytössä, mutta löytyy mm. paremmat hallintatyökalut juurikin palvelinkäyttöä ajatellen, kontit, Windows admin center, ei ole 20 samanaikaisen sisäänpäin tulevan SMB-yhteyden rajoitusta (Toki kotikäytössä ei nyt niin merkitystä), järeämpi versio Hyper-V:stä, ei tule turhaa tauhkaa mukana, ReFS, jne...
Ominaisuuksia voi myös lisätä ja poistaa sitä mukaa kun tarvitsee.

Joka tapauksessa, hieno projekti :tup:
Napsauta laajentaaksesi...
Kiitosta 😎 saa tosiaan laitella ihan huoletta näitä vinkkejä, kun en mä ole pahemmin ees miettinyt et mitä järkevää tällä tekisin sitten kun saan virrat päälle 😁
 
Aika johtohelvetti tää kyllä on, mutta sentään on umpikotelo nii ei tarvi kattella. Kalvaa tietysti mieltä jos on ihan ruokottoman näköinen silti vaikkei näkiskään 😅

IMG20250127135723.jpg
 
Tulkitten tätä varmaan ihan väärin, mutta jotenkin ymmärrän, että pitäisi etupaneeli kytkeä tuollai eikä perinteiseen kahteen riviin? 🤔

IMG20250127141039.jpg


IMG20250127144918.jpg
 
Err sanoi:
EDIT: ei mitään, katsoin väärä liitintä.
Napsauta laajentaaksesi...
Joo, kun mietin että jos laitan ton pw sw tuosta 2. pinnistä sivuttain, niin sehän on sitten miinuspinnillä tuossa 4. pinnin reset buttonissa ja eikä se niin voi mennä oikeen 😅
 
Sain käynnistymään, mutta jää jumiin koodiin 67, joka ei kerro mulle yhtään mitään. Saa jäädä tältä erää ja revin prossujäähyt ja muistit irti joskus toiste.
 
Viimeksi muokattu:
Kunhan jaksat tuon kanssa taas viritellä, niin kurkkaisin saako IPMI:n kautta mitään lisätietoja mahdollisesta ongelmasta. Eli laita tuo verkkoon kiinni. Tuo luultavasti saa oletuksena DHCP:ltä IP-osoitteen, jolla pitäisi päästä selaimesta käsiksi. Katso, että emolle tulee virrat. Konetta ei kuitenkaan tarvitse käynnistää, että IPMI itsessään toimii. Tunnuksina voi kokeilla vaikka admin / admin tai admin / password ellei nuo lue jossain siinä emolla erikseen.

Tuolta luultavasti pystyy myös päivittämään biosin jos auttaisi itse ongelmaan.

Tuolla emolla on sitten IPMI:lle oma ethernet-portti:
2xIntel i225-V Gigabit Network Card, 1xIPMI Dedicated IPMI LAN port by RTL8211E
ASPEED AST2500 Baseboard Management Controller(BMC) support IPMI 2.0,1xIPMI LAN at rear panel interface

Itse koodi saattaa kuitenkin tarkoittaa tätä: CPU DXE (Driver Execution Environment) initialization phase.
 
Desgorr sanoi:
Kunhan jaksat tuon kanssa taas viritellä, niin kurkkaisin saako IPMI:n kautta mitään lisätietoja mahdollisesta ongelmasta. Eli laita tuo verkkoon kiinni. Tuo luultavasti saa oletuksena DHCP:ltä IP-osoitteen, jolla pitäisi päästä selaimesta käsiksi. Katso, että emolle tulee virrat. Konetta ei kuitenkaan tarvitse käynnistää, että IPMI itsessään toimii. Tunnuksina voi kokeilla vaikka admin / admin tai admin / password ellei nuo lue jossain siinä emolla erikseen.

Tuolta luultavasti pystyy myös päivittämään biosin jos auttaisi itse ongelmaan.

Tuolla emolla on sitten IPMI:lle oma ethernet-portti:
2xIntel i225-V Gigabit Network Card, 1xIPMI Dedicated IPMI LAN port by RTL8211E
ASPEED AST2500 Baseboard Management Controller(BMC) support IPMI 2.0,1xIPMI LAN at rear panel interface

Itse koodi saattaa kuitenkin tarkoittaa tätä: CPU DXE (Driver Execution Environment) initialization phase.
Napsauta laajentaaksesi...
Tutustun tuohon jos ei ole mitään eroa, kun koittaa bootata kahdella kammalla. Ähelsin tänään prossujäähyt irti ja napsin muistit pois. Ärsyttävästi prossujäähy peittää muistipaikat (toki jäähdyttää niitäkin samalla), niin pitää joka kokeilulla jäähy irrottaa ja asentaa takaisin.
 
Hieno se kyllä on mutta mitä olet tuolla ajatellut ajaa, vai ihan säätämisen ilosta?
 
TuBBe sanoi:
Hieno se kyllä on mutta mitä olet tuolla ajatellut ajaa, vai ihan säätämisen ilosta?
Napsauta laajentaaksesi...
Selailen vähintäänkin iltalehteä, mutta pääasiassa ihan säätämisen ilosta rakentelen. Ehkä jotain omaa tiedostopalvelinta yms vähintäänkin. Miksei jotain privaservuakin hostailisi johonkin peliin, kun giganen valokuitu löytyy tän kaveriks. Sais ensin laitteen kasaan niin eiköhän sitä jotain keksi sitten muutakin kuin cinebenchiä ajaa 😂
 
6kpl Samsungin CRC0Q -päätteistä kampaa ainakin boottaa iloisesti yhdessä, seuraavaksi näkee loppuuko ilo kun sekaan laittaa noita CRC4Q 😅

IMG20250131181649.jpg


IMG20250131181754.jpg
 
Joo nämäkin boottaa yhdessä toisten Samsungien kanssa 😎🥳 Harmaat slotit on muistien master slotit. Jotenkin ajattelisin että olis järkevää laittaa sitten master-slave aina täysin samanlainen kampa 🤔 Yhteensä löytyy siis 4xCRC0Q ja 8xCRC4Q samsungeja ja siihen päälle 2xkingston sekä 2xhynix vielä 😅

IMG20250131183138.jpg
 
Viimeksi muokattu:
Heti kun laitoin noihin mustiin slave paikkoihin ramit pariksi niin on taas tuttu 67 error. Kiinalaiset sanoivat viettävänsä uutta vuotta niin ei kerkeä neuvomaan, mutta kai sekin kohta on ohitse 😅

IMG20250131192434.jpg
 
Kingstonin 2kpl kampoja boottaa yhdessä Samsungien kanssa, mutta jos hynixit vaihtaa Kingstonin tilalle niin se aiheuttaa error 67. Mustia slotteja en ole vieläkään saanut antamaan elon merkkejä. Löysäsin prossujäähyn kiinnityksen varmuuden vuoksi ja kiristin varovaisesti uudelleen, jos olisi ollut siitä kiinni, mutta ei eroa.

IMG20250202145838.jpg


IMG20250202150247.jpg


IMG20250202150638.jpg


IMG20250202150645.jpg
 
Noni Windows 11 Pro for Workstations asennettu onnistuneesti nvme asemalle! 🥳 Verkkoajurit ei suoraan toiminut, mutta onneks komentorivillä saa ohitettua sentäs senkin vaatimuksen. Aika hölmöä, että vaatii tollasen rimpsun siihen, että tulee näkyviin valinta "minulla ei ole internetyhteyttä".

Nvme tuli osioitua näköjään vähän turhan pieneksi Windowsille, kun taisi rohmuta 200 gigaa pagefile tilaa 😅🤣

IMG20250202194344.jpg


IMG20250202195825.jpg


IMG20250202193606.jpg
 
Eka vedos Cinebenchillä tehty ja ihan stable systeemi ainakin sen vaatimuksiin. :D Muistit tällä hetkellä 1866 Mhz (13-13-13-30) ja prossut "kellottamatta".

cinebench2024-stock-dual-channel.png
 
Itse olen saanut muistiongelmia korjattua lisäämällä vain muistien jännitettä.
Eikös toi kone olisi hyvä Proxmoxin harjoitteluun?
Ja siihen Windows Serveri virtuaalikoneena.
 
JeanS sanoi:
Itse olen saanut muistiongelmia korjattua lisäämällä vain muistien jännitettä.
Eikös toi kone olisi hyvä Proxmoxin harjoitteluun?
Ja siihen Windows Serveri virtuaalikoneena.
Napsauta laajentaaksesi...
Piti ihan googlata mikä on proxmox 😅 ihan varmaan olisikin ihan pätevä siihenkin hommaan 👍 Tosiaan toi emolevy ei etene bootissa error 67 ylitse, jos tohon muistipakkaan lisää nuo 2 hynixiä Samsungien ja Kingstonien kanssa samaan settiin. Kaikki muistipaikat (16kpl) toimii tällä hetkellä, 14 on nyt käytössä. Mustat slotit lähti toimimaan prossujäähyn alakiinnikeen uudelleen asentamisen jälkeen. 👍
 
Lähtikö ne muistit toimimaan? Mulla oli kanssa ongelmaa Huananzhi X99 F8D PLUS LGA emolla. Piti irroittaa sockettien kiinnitysmekanismit ja ruuvata löysemmin kiinni niin alkoi toimimaan kaikki slotit.
 
Proxmoxin käytöstä löytyy sitten Youtuben puolelta oikein päteviä videoita jos alkaa virtualisointihommat kiinnostamaan. Proxmox on yllättävän helppokäyttöinen webbikälin kautta ja harvemmin tuossa tarvitseekaan mitään tehdä komentorivin kautta.
Kerta ytimiä on 36 ja muistiakin kotikäyttöön rapeahkot 512 GB (Toivon mukaan saat kaikki toimimaan), niin kannattaa ihmeessä tutustua virtualisointiin. Vaikka sitten Proxmoxilla tai Windows Serverillä Hyper-V:n kanssa jos tuntuu itselle helpommalta. Olettaen toki, että tästä on tulossa jonkunlainen kotipalvelin / labrakone, eikä desktop kone.
 
xarot sanoi:
Lähtikö ne muistit toimimaan? Mulla oli kanssa ongelmaa Huananzhi X99 F8D PLUS LGA emolla. Piti irroittaa sockettien kiinnitysmekanismit ja ruuvata löysemmin kiinni niin alkoi toimimaan kaikki slotit.
Napsauta laajentaaksesi...
14/16 muisteista toimii yhdessä tällä hetkellä, mutta kaikki slotit on kyllä kunnossa. :cool: Aika herkkä toi tosiaan tolle kireydelle 😅

Desgorr sanoi:
Proxmoxin käytöstä löytyy sitten Youtuben puolelta oikein päteviä videoita jos alkaa virtualisointihommat kiinnostamaan. Proxmox on yllättävän helppokäyttöinen webbikälin kautta ja harvemmin tuossa tarvitseekaan mitään tehdä komentorivin kautta.
Kerta ytimiä on 36 ja muistiakin kotikäyttöön rapeahkot 512 GB (Toivon mukaan saat kaikki toimimaan), niin kannattaa ihmeessä tutustua virtualisointiin. Vaikka sitten Proxmoxilla tai Windows Serverillä Hyper-V:n kanssa jos tuntuu itselle helpommalta. Olettaen toki, että tästä on tulossa jonkunlainen kotipalvelin / labrakone, eikä desktop kone.
Napsauta laajentaaksesi...

Joo eiköhän sitä opi mitä vaan tekemään jos on kunnon ohjeet 😄 Kai tästä joku yleiskone/työasema tulee eikä varsinainen serveri pelkästään, mutta aika näyttää 😄
 
No nyt on mötkäles suorituskykyä :cool:
Mä tyydyin kahteen Xeon 2695v2 kiveen toisessa kotipannussa ja alta 200GB DDR3 RAM. Koska vain 2x750W PSU:t. Jätän vähä pelivaraa virtalähteille.
Toisessa sitten 2x 2620v4 ja DDR4 upgrade mielessä (ei välttämätön/kiirellinen).

Molemmat raudata ovat virtualisointialustoina. Suosittelen myöskin tähän tutustumista. Se ei lopen mahdottoman vaikeaa ole, koska harrastajien opasvideoita löytyy kyllä. Sisältö vaan ei tieten avaudu helposti, ilman kiinnostuksen kipinää.
 
dot1q sanoi:
No nyt on mötkäles suorituskykyä :cool:
Mä tyydyin kahteen Xeon 2695v2 kiveen toisessa kotipannussa ja alta 200GB DDR3 RAM. Koska vain 2x750W PSU:t. Jätän vähä pelivaraa virtalähteille.
Toisessa sitten 2x 2620v4 ja DDR4 upgrade mielessä (ei välttämätön/kiirellinen).

Molemmat raudata ovat virtualisointialustoina. Suosittelen myöskin tähän tutustumista. Se ei lopen mahdottoman vaikeaa ole, koska harrastajien opasvideoita löytyy kyllä. Sisältö vaan ei tieten avaudu helposti, ilman kiinnostuksen kipinää.
Napsauta laajentaaksesi...
Ite päädyin tähän V3 sarjaan V4 sijasta, kun ajatuksena olisi vähän kellotella näitä Xeoneita sitten joskus, kun on kone kasattuna valmiiksi asti 😄 V4 xeonit kyllä syö vähemmän virtaa ja vähän enempi ytimiäkin löytyis 😄

Oon mä joskus jollain vmwarella yms pyörittänyt jotain Windowsia Linuxissa ja päin vastoin, mutta en sen enempää. Itelle ei ihan täysin avaudu, että mihin käyttötarkoitukseen tarvitsee vaikka kymmenen virtuaalikonetta, jos ne ei siis ole jotain virtuaalipalvelimia 😅
 
V31751 sanoi:
Ite päädyin tähän V3 sarjaan V4 sijasta, kun ajatuksena olisi vähän kellotella näitä Xeoneita sitten joskus, kun on kone kasattuna valmiiksi asti 😄 V4 xeonit kyllä syö vähemmän virtaa ja vähän enempi ytimiäkin löytyis 😄

Oon mä joskus jollain vmwarella yms pyörittänyt jotain Windowsia Linuxissa ja päin vastoin, mutta en sen enempää. Itelle ei ihan täysin avaudu, että mihin käyttötarkoitukseen tarvitsee vaikka kymmenen virtuaalikonetta, jos ne ei siis ole jotain virtuaalipalvelimia 😅
Napsauta laajentaaksesi...
Raudan perusteella olettaisi, että menee virtualisointialustaksi kotiin, kun eihän tossa muuten oikein "järkeä" ole.
Itsellä pyörii kotona pari räkkiserveriä ja esim tuohon voi heittää proxmoxin pohjalle ja tuupata vm;ään esim. seuraavaa:
  • home assistant kotiautomaatioon
  • pfsense tai opensense virtuaalisena palomuurina (tarttee verkkokortteja lisää)
  • pihole blokkaan mainoksia
  • eri linux distroja eri serveri hostaukseen, yms käytöön tai testailuun
  • Windows server käyttis, jos tarve ajaa winkkarin servua
  • windows desktop os
 
Viimeksi muokattu:
Lisäksi TrueNAS tai vastaava NAS menisi virtuaalisena hyvin tossa koneessa kun 10xSATA portteja ja useampi kiintolevypaikka kotelossa. Tosin HBA kortti passthrough:ina olisi suositus TrueNAS:ille tms.
Mutta mulla on toinen TrueNAS servereistä emon SATA porttien kautta ilman passthroughta, eikä toistaiseksi ole ollut ongelmia.
 
Kirjaudu tai rekisteröidy kirjoittaaksesi tänne.

Uutiset

Uutisia lyhyesti

Uusimmat viestit

Statistiikka

Viestiketjuista
267 376
Viestejä
4 624 156
Jäsenet
76 029
Uusin jäsen
ArticFront

Hinta.fi

Back
Ylös Bottom