infectedtech: The AAPEN Project

[[Infected]]

En oransje traad

 

 

 

 

Kabelsamlere

 

Svart

 

Hvitt

 

Distribusjon

 

Etasjer

 

'Dumb', ny node (8 core, 32gb ECC, 2U)

 

 

 

Kommentarer

Endret 4. september 2014 av [Infected]

[[Infected]]

ACHTUNG!

 

ALLES TURISTEN UND NONTEKNISCHEN LOOKENPEEPERS!
DAS KOMPUTERMASCHINE IST NICHT FÜR DER GEFINGERPOKEN UND MITTENGRABEN! ODERWISE IST EASY TO SCHNAPPEN DER SPRINGENWERK, BLOWENFUSEN UND POPPENCORKEN MIT SPITZENSPARKSEN.
IST NICHT FÜR GEWERKEN BEI DUMMKOPFEN. DER RUBBERNECKEN SIGHTSEEREN KEEPEN DAS COTTONPICKEN HÄNDER IN DAS POCKETS MUSS.
ZO RELAXEN UND WATSCHEN DER BLINKENLICHTEN.

Blinkenlights

 

 

 

Grafer og slikt er jo ogsaa morsomt

 

4x Noctua NH-U9DO A3

 

2 stykk. Tyan S8230-GM4NR

 

4 stykk. 16 kjerne G34 Opteron 'Abu Dhabi' Engineering Samples (HE 85W TDP), for totalt 64 kjerner

 

 

 

Und naturlich, das kommentarenplatz!

Endret 4. september 2014 av [Infected]

[[Infected]]

Dual-Weilding Dualies

 

Hovedkortet, ett grønt og fint Tyan G34

 

 

 

Noctua G34 kjøler gjør seg jo bra

 

Kjøleren er utpakket og klar til montering

 

Første test-run, med en cpu og en rambrikke..

 

Booter gjor det visst og! Med hele 16 kjerner og 8gb ram

 

CPU nr. 2 monteres

 

Begge kjølerene er på plass

 

 

Pretty little buggars, them are

 

 

 

kommentartråden!?

Endret 4. september 2014 av [Infected]

[[Infected]]

Atter en update

 

 

 

 

Begge CPU'ene operative, og litt ram

 

 

Bench-testing

 

Saa mange pingviner!

 

Mmmm

 

 

 

 

Ahh, blinkenlights

 

Kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Update

 

 

 

Ny forsendelse

 

PSU og rackskinner

 

PSU'en utpakket

 

EPS12v

 

Kabinettet

 

4U rackmount

 

Plain, clean and simple, just the way I like it

 

Extreme Switch'ene er stacket

 

Kabling for stacking

 

 

 

Begynner aa samle seg litt Extreme gear... kanskje snart paa tide med ett LAN party

 

Kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Generisk Update

 

Innsiden av kabinettet

 

 

 

 

Er det ett merke der ut jeg stoler paa nar det kommer til vifter der det 'Dong Guang Zhan Yu Industries'

 

 

 

Frontviftene er fra 'Ning Jie Electronics', enda ett velkjent kvalitetsmerke av kaliber

 

LItt dremeling maa til

 

Front drive cage

 

Litt mer dremel magi

 

Resultatet

 

 

 

 

kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Generisk Update II

 

 

 

 

 

Ny forsendelse, dustin denne gangen

 

Zalman vifter

 

On target

 

Ny kjoling kommer paa plass

 

SSD'er til OS og litt RAM

 

Rack rails

 

 

 

 

Begynner aa naerme seg noe

 

kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Generisk Update III

 

 

 

Kabler denne gangen

 

Nettverkskabel

 

Mer nettverkskabel

 

Bundles

 

 

 

 

Droppet

 

Og som alltid, kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Generisk Update IV

 

 

 

Forbereding

 

Terminering

 

Tilkobling

 

Bundles

 

 

 

Switching

 

kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Generisk Update V

 

 

 

Litt modifisering av rack layout'en

 

Begynner visst aa bli litt fullt her gitt

 

De nye nodene, InBloom og DrainYou

 

 

Baksiden av DrainYou

 

Kabelgatene til de nye nodene, 16x Gigabit

 

Nye InfiniBand kabler

 

 

 

 

 

The work must go on, when the going gets weird, and all that

 

AAPEN workloggen (men ikke prosjektet...) tar en aldri saa liten pause... kanskje vi starter opp friskt igjen paa nyaaret, kanskje ikke, tiden vil vise... c'est la vie

 

kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

Update: Lagring

 

 

 

 

Nevermind er sekundaer noden i klyngen og fungerer som sekundaert SAN, og primaert NAS for installasjonen. Den har putret og gaatt en stund naa.. saa det var paa tide med litt velfortjent oppgradering og aldri saa lite vedlikehold

 

Nevermind har 8 kjerner og 32GB ram, samt en Adaptec 4 lane (4x4 SAS via breakouts) raid kontroller

 

Det opprinnelige sekundaere SAN'et. Venstre side er for det meste assorterte 1TB 5.4k disker (parvise), samt en 500GB til scratch disk, hoyre side er en SSD til OS, og 5x 500GB Black 7.2k disker.

 

Ett nytt NAS (sekundaert) paa 6x 3TB i RAID6 installert paa hoyre side, og 2.5" diskene har blitt flyttet til backplanes

 

Kablingen kommer paa plass, ett par SAS porter er ledige, men begynner aa bli fullt. Alle diskene kjorer i passthrough.

 

Litt kabelsalat maa det jo alltids vaere

 

En 120mm Adda holder luftlyt over primaer NAS'et (4x 2TB i raid5)

 

Mmm, nevermind the spaghetti

 

 

Primaernoden har faatt litt oppgraderinger paa lagringen den ogsaa. Primaer SAN'et bestaar av 12 disker, hvorav 4 er SSD'er, 4 er 7.2k 500GB'er i RAID 10, samt 4 nye 1TB disker for ekspansjon. For ovrig eneste maskinen som enda ikke kjorer OS fra SSD, og kjorer istedet fra to XT hybrid disker i RAID1.

 

SATA lanes til hovedkortet samt en Areca 8 port raid kontroller styrer morroa.

 

Polly har ogsaa fatt en oppgradering til 32GB ECC ram, noe som absolutt hjelper en stakkars overbelastet server

 

3x nye backplanes er installert

 

SAN'et operativt

 

 

Scoff er backup serveren i klyngen, og er en low powered AMD Bobcat med 8GB ram og en IBM m1015 SAS kontroller, og brukes hovedsakelig til aa drive en LTO4 (1.6TB) tape drive. Men litt disk oppgraderinger har det ogsaa blitt plass til, 2x 2TB i RAID1 brukes til lagring, samt en 2TB til tape-buffer, og en 1TB til logger og annet slikt. OS fra SSD.

 

 

 

 

Rack'et, og blinkenlights

 

 

Lyst til aa se mer?.. Kommentartraaden!

Endret 4. september 2014 av [Infected]

[[Infected]]

~~ Teaser ~~

 

Stay tuned.. og som alltid, kommentartraaden!

[[Infected]]

Nightpics

 

 

 

Racks

 

Servere

 

 

 

Nettverk

 

Kommentartraaden!

Endret 4. september 2014 av [Infected]

[[Infected]]

Misc. Update

 

Fiber

 

 

 

Makeshift stige ftw!

 

Ny switching layout

 

Skriver ut ett gammelt NAS; dual-core FM2 med 16GB ECC

 

 

 

 

Kommentartraaden!

Endret 4. september 2014 av [Infected]

[[Infected]]

Misc. Update II

 

Nettverkscore for klyngen kommer paa plass

 

 

 

Trekking av fiber uplink'ene

 

Begynner aa ligne paa noe

 

Ny UPS... 3 fase.. og APC metered PDU

 

 

 

 

Og som alltid, Kommentartraaden!

Endret 4. september 2014 av [Infected]

[[Infected]]

~~Teaser 40A PFXP 4G10++~~

 

 

Kommentartraaden!

[[Infected]]

~~ Mini Update ~~

 

 

 

 

Ikke heeelt imponert med tilstanden paa pakken fra Multicom her

 

Men innholdet ser ut som det har kommet vel frem, bortsett fra at de shortet ordren med en SAS kabel da.. bastards

 

Pakke fra dustin

 

Litt morro er lov av og til, saa det ble en dugelig Linux gamer samt forste TLC SSD i nettverket..

 

Gode gamle Spacemonkey, var paa tide med en oppgradering

 

 

 

 

Og helt til slutt, litt disker

 

Og som alltid -- kommentartraaden

Endret 4. september 2014 av [Infected]

[[Infected]]

~~ Such Update ~~

 

 

 

 

 

25A til ett rack, 15A til det andre, og 15A til nettverk.. og litt rom for fremtidig utbygging

 

Kanaler i taket, og litt dimensjon paa inntaket

 

Mmm

 

SLA batterier for alle pengene! Such battery, wow, such Ah~(/=)!

 

Batteriskifte i gang.. en ny SAN node over.. ikke helt klar enda..

 

NAS'et paa den andre siden begynner aa bli klart

 

Such patch, such bulk!

 

Seriell!? Hmm

 

 

 

 

Such comments! wow!

Endret 4. september 2014 av [Infected]

[[Infected]]

~~ En slags nettverksoppdatering ~~

 

 

juniper

 

SRX... er ikke Netscreen... men begynner aa se litt mer av sammenhengene i JunOS naa.. likevel ikke fan

 

config og litt leking paa "benken" er lov.. en juniper/trapeze wlan kontroller paa bunn

 

 

Routing og brannvegglaget.. begynner aa kommer seg

 

kondensatorer... men ikke hvilke som helst caps, hoykvalitets Japanske Panasonic Long Life caps (4000hrs vs 1000hrs)..

 

en av mine kjaere extremes.. nede for telling

 

mmm.. disse cap'ene holder paa dram'en... dette er jo ikke helt bra.

 

nye vs. gamle

 

 

one brain fixed.. kjent produksjonsfeil paa disse kondensatorene...

 

 

management modulen tilbake i switch'en.. etter litt 'hjerne kirurgi'

 

Rock on baby!

 

 

Og som alltid, ta en tur innom kommentartraaden!

[[Infected]]

~~ Og saa var det visst enda en oppdatering ~~

 

Noen gamle, noen nye.. ROHS tinn er noe &$^#!!@@ aa jobbe med

 

Server-core, mer eller mindre halvparten operativ

 

Litt nye leketoy

 

Halvparten av det nye SAN'et

 

Mer Juniper?

 

Jepp, mer Juniper

 

Sakerhetstape

 

Ett nytt SAN

 

SAS IT (Initiator/Target) mode FTW

 

Dumb, 1/2 av nye SAN'et, 8 Core AMD, 32GB ECC, IBM/LSI SAS, InfiniBand, 10GB Ethernet

 

Halvparten av ett gammelt SAN.

 

Gettin' there Dumb + Breed er nye SAN'et, montert paa hoyre side

 

Server-core tilbake, etter caps i alle switchene har blitt fixet

 

Routing og brannvegglaget kommer sammen, en ny Extreme Networks med Advanced Edge lisens har tatt over som server aggretator

 

Og som alltid, ta en tur innom kommentartraaden!