Core

Plaargh, assyt ohi ja paluu normaali arkirytmiinkin on sujunut suunnilleen hyvin. Töissä saatiin jopa tuo Windows 7 noin suurin piirtein tuotantoon ja vielä ilman katastrofaalisia ongelmia.

Sen sijaan tänään räpsähtikin sitten ekaa kertaa mun aikana töissä sähköt, kaikki koneet päättivät bootata kivasti ja valotkin siinä taisi välähtää. Tietenkin siinä ensimmäisenä tuli mieleen että nyt meni servutkin, mutta sitten muistin että mehän vedettiin sinne suht. järeä UPS, joten ei niille pitäisi mitään käydä. Noh kuten arvata saattoi, eihän se homma ihan niin mennyt. Palvelimet kyllä vastasivat mutta, mitkään komennot ei menneet läpi mitä niille koitti ajaa. Siinä sitten alettiin etsimään yleisavainta jolla pääsisi laitetilaan. Yleisavaimen etsimistä vaikeutti se että juuri eilen talosta jäi kaikki vahtimestarit lomille / pois,  joilla yleensä on avainkaapin avain jossa yleisavain lymyää.

Noh vajaa tunti etsimistä ja uhkailua että avainkaappi saa kohta vasarasta jossei avainta löydy, avain löytyikin ja pääsy laitetilaan onnistui.

Laitetilassa hetken ihmettelyä. Palvelimet ylhäällä, verkko ylhäällä, iSCSI ja nauharobotti ylhäällä, miksi mikään ei toimi? Näyttö kiinni ja toteaminen, “jaahas iSCSI verkkoa hoitava kytkin on päättänyt bootata ja palvelimilta on hävinnyt levyt…” Hetken debug ja tuli huomattua että kaikki muu oli upsattu paitsi se perkelen iSCSI:tä hoitava kytkin. Ei siinä sitten muuta, virtapiuhan vaihto tökkelistä a tökkeliin b ja palvelimien uudelleenkäynnistys, ding ja hommat lähti rullaamaan. Alla vielä kuva rautaläjästä mitä piti käydä potkimassa.

Tulipahan tuossa myös eilen ja tänään säädettyä tuollainen ristiinrastiin onsite & offiste backuppaus ~kaikille servuille missä satun nyt olemaan ylläpitäjänä. Eilen sitten synccasin datat paikasta a paikkaan b. 609Gt tavaraa levypakalta1 -> palvelin1 <-> internet <-> palvelin2 -> levypakalle2. Hetkihän siinä vierähti ja tulipahan nätit käppyrätkin aiheesta. (Klikkaamalla suurenee)

Tämän lisäksi tuli myös asennettua vihdoin valmiiksi uusi virtualisointiympäristö nimeltään dom1 ja uusi monitor-palvelin mihin tulee siirtymään tuo käppyröiden vääntö ja SMS-hälyjen hoitaminen. Kaiken kukkuraksi, tänään alkoi reitittymään myös firmalle uudet IP:t mitä Ripeltä pyydeltiin.

Sitten vielä kuva Assemblyiltä. Kuva sunnuntai aamulta joskus kuuden tienoilta. Pasilan asemalla pari lanittajaa tilasi limua ja lopputulos..

Potkimallahan se sieltä sitten loppujen lopuksi tuli!

Jep hommaa piisaa ja nyt kun vielä innostu vähän pelailemaankin.

Mutta pitemmittä puheitta, kuva kertoo enemmän kuin tuhat sanaa… Vai miten se nyt oli.

Jokunen viikko sitten leivottiin Jennin kanssa. Taikina otti vähän turvotakseen :D

Sitten uunista tuli yksi FUUUUUU-pulla.

Ja siinä sitä aikaa sitten kulukin. Pullanpaiston jälkeen pari blogausta tulikin, ja sen jälkeen sitten taas hiljasta. Eniveis nyt tosiaan alkaa pikkuhojaa Mojotkin puskemaan päälle kunnolla, jonka lisäksi tuota palkkaduuniakin pitäisi tehdä, niin on tämä blogailu jäänyt vähän vähemmälle.

Siitä sitten! Yhtenä päivänä töiden ohessa vähän Mojoiltiin ja pistettiin nuorisotaloille julisteita sisäsellä postilla.

Sitten eräänä päivänä oli tarkoitus siirtää kaikki bonkki loppusijoituspaikkaansa duunissa. Ei siinä muuta kuin kärryt alle ja siihen päälle sitten pari palvelinta ja levypakkaa. Pikaspekseinä sanottakoon, että reilu 10 prosessoriydintä, 50Gt RAM ja 60TB raakaa levyä.

*Ähkyypuhkuu* ja näin, ~60TB levyä löysi paikkansa räkin pohjalta. Hyötytilaa on luonnollisesti vähemmän koska levyjä lätkitään RAID:iin tasoltaan 5.

*Ähkyypuhkuu^2* ja näin ollaan saatu kaikki rauta raameihin. Siinä sitä nyt sitten komeilee se reilu 10kpl prosessoriytimiä, 50Gt RAM:ia sekä 60TB levyä. Siihen päälle vielä tuo nauharobotti ja räkin takana oleva  järeähkö UPS painamassa varavirtaa pahan päivän varalle koko setille.

Kuitenkin jotakuta kiinnostaa mitä kaikkea tollasella määrällä rautaa sitten ajetaan? Noh vastaus on yksinkertainen. Nuorisoasiainkeskuksen palveluita ja toimintoja varten virtuaalipalvelimia. Noilla palvelimilla pyörii mm. pelitalojärjestelmän nettikahvilasoftan sekä replikointipalvelimen isäntäpalvelin.

Lopuksi rautaläjää ihmetellessä osuipa silmään tuon toisen HP:n palvelimen diagnostiikkaledit. Olivat nimittäin asennettu tuollaiseen ulosvedettävään korttiin.

Sellanen kuvakooste kuluneilta viikoilta. Tämän lisäksi on sitten tullut opiskeltua WAIK:ia ja taisteltua Windows 7 kanssa. Siinä ohessa sitten tehty miten ehditty Solid Mojoille palvelin/työasema levykuvia. Nimittäin eihän noihin laneihin ole enään kuin reilu viikko! Huomenna pitäisi noutaa osa tapahtuman verkkoraudasta tänne Myyrmäkeen ja ensiviikolla lisää.

Sitten näin lopuksi vielä kuva junasta, tarkemmin ottaen matkakortin leimauslaitteesta.

Ei ollut ensimmäinen kerta kun koko junan leimausmasiinat sanoivat tuota samaa. Noh tulipahan taas reissattua sitten leimaamatta lippua, tosin lienee ihan sen arvostakin. Ei tuo VR nimittäin viime aikoina ole kulkenut kuten suunniteltu.

Näinpä, alla “lyhyesti” edellisten päivien tapahtumat.

Nimittäin tuo edesmennyt viikonloppu oli aika tapporeissu. Päätettiin Christianin kanssa pamauttaa yksi räkki kasaan omalle firmallemme ja siinä ohessa sitten meidän internetoperaattori Verkko-osuuskunta Kajollekkin.

Lauantai
Operaatio alko lauantaina joskus ~16.00 jälkeen purkamalla yksi vanha räkki pois tilasta, jonne meidän räkin oli tarkoitus tulla. Tämän jälkeen sen pois revityn räkin lastaaminen autoon ja toisen hakeminen laivakontista tilalle. Kun saatiin sitten se toinen räkki laivakontista peräkärryyn ja peräkärrystä wanha laivakonttiin, olikin jo kulunut useampi tunti. Tämän jälkeen sitten räkki peräkärryssä ja random-tavaraa autossa kohti laitetilaa. Siinä sitten ennen kuin uusi räkki saatiin tilaan, niin 30cm levyinen kävelyväylä lumihangessa leveni 3 metriseksi autoväyläksi jonka jälkeen saatiin uusi räkki aika kivuttomasti peräkärrystä melkeenpä suoraan tilaan sisään.

Aikamme sitten tapeltua ja puukapuloilla tukien saatiin vielä räkit suoraankin. Tämän jälkeen alettiin sitten purkamaan yhdestä räkistä kamaa toiseen ja siinä ohessa sitten samalla täyttämään omaa räkkiämme.

Sunnuntai
Jossain puolenyön tienoilla alkoi Kajon räkissä olemaan kamat jotenkin kuosissa, näihin aikoihin Christian lähti vielä kytkemään yhtä kuitua keskukselle meidän käyttöön. Sinä aikana minä sitten taistelin bonkkia raameihin tohon meidän firman räkkiin. Sinne tuli sitten upotettua yksi 2U palvelin jonka yhdeltä irkkitutulta sain käyttööni, yksi 1U palvelin jonka Christian omistaa, yksi ATX bonkki 4U räkkikopassa, sekä kaksi kappaletta asiakkaiden ATX koneita hyllylle. Tämän lisäksi tuli pultattua räkin yläosaan tuo joululahjaksi saamani Extreme Networksin Summit 48si-kytkin hoitamaan koko kaapin verkkoliikennettä.

Jokunen hetki siinä meni taistellessa ja kiroillessa, nimittäin räkit tuntu olevan alhaalta ja ihan ylhäältä tiukempia kun keskeltä. Tulipahan vaan huomattua kun koitettiin änkeä ~50kg painavaa tiedostopalvelinta ihan räkin alaosaan. Ei oikein tykännyt upota, ei sitten millään. Pari unittia ylemmäs se upposi sinne kuin kusi sukkaan.

Ding, siinä sitä sitten vielä jokunen tunti vierähti Christianin kanssa viritellessä. Tuli nimittäin saman operaation aikana pistettyä yksi 4U ATX bonkki suoraan poistoon ja siirrettyä sen palvelut kahdelle virtuaalille. Onneksi tosin suurin osa työstä oli tehty ennakkoon. Christian sillä aikaa taisteli Kajon tiedostopalvelimen kanssa, jossa mitä luultavammin oli emolevyssä vikaa. Tulipahan nimittäin kokeiltua uudella RAID-ohjaimella sekä muisteilla ilman menestystä.

*PUF* kello jotain 04.00 luokkaa sunnuntaina ja päätettiin alkaa pistää pillejä pussiin. Lähdettiin siinä sitten ajamaan kohti Järvenpään juna-asemaa, mistä minä sitten nappasin junan kohti Helsinkiä. Siinä sitten tunnin verran junassa istuskellen ja vielä läppärillä palvelimia hienosäätäen. Tulipahan mm. yhdistyksen virtuaalipalvelimet poljettua pystyyn. Vähän kuuden jälkeen olinkin jo sitten rautatieasemalla josta nappasin M-junan kohti Vantaankoskea ja kotia.  Kotiin kun pääsin niin löin kellon soimaan ~12.00 ja painuin nukkumaan, puhelin sitten rääkäsi että 4h 50min herätykseen ja sehän passasi.

Lähtiessä nappasin vielä yhden kuvan hätäsesti molemmista pystyyn lyödyistä räkeistä.

Sellaset komistukset, saas nähdä kuinka paljon tota tilaa pitää vielä siivota, homma kun nyt vielä jäi vähän kesken.

Siinä sitten 5h unta ja 13.00 alkoikin Solid Mojon ydintiimin kokous missä käsiteltiin sitä sun tätä. Kokouksesta kun selvisi, niin kotiin vielä vääntämään palvelimia kuosiinsa. Yllättävän paljon siinä sitä hommaa sitten olikin, mutta tulipahan tehtyä SMS-hälytysjärjestelmä valmiiksi sekä SNMP-verkonvalvontakikkailutkin.

Maanantai
Siitä sitten aamulla ilosesti kouluun klo 08.00 ja kotiin joskus vähän ennen neljää. Koulusta soittelin sitten vielä mahdolliselle LAN-tapahtumamme tukijalle, jospa saataisiin heiltä vähän verkkorautaa tapahtumaamme. Koulupäivän jälkeen sitten lyhyet tirsat, jonka jälkeen jotain pientä palvelimien hienosäätöä sekä (r)DNS:ssien korjailua. Illasta rupesin vielä firman valvontasysteemeitä virittelemään ja siinähän sitä sitten taas vierähti. Aivan kuin tuo valvontaysteemien virittely ei olisi riittänyt, niin rupesin sitten vielä vääntämään tuon oman palvelimen levypakan kanssa. Piti koittaa tehdä toinen 1.5Tb RAID5 jako ja mounttailla se iSCSI:llä palvelimelle, mutta eihän se ihan nappiin mennyt joten jätin asian sikseen.

Tiistai
Aamusta sitten taas pirteänä (not..) kouluun ja koulusta sitten suoraan töihin. Töissä sitten ensimmäiseksi väänsin videotykkiä kattoon, jonka jälkeen vielä kattelin tuota omaa palvelinta ja levypakkaa. Tulin siihen päätökseen että teenkin yhden 10 levyn RAID5 pakan tuon esin mietityn kahden viiden levyn RAID5 pakan sijaan. Hetken viriteltyäni ja umounttailtuani olikin 10 levyn RAID5 ylhäällä ja levyttilaa palvelimella 3.3Tb. Safkiksella kävin sitten hakemassa Christianilta nimen vielä firman yhteen paperiin, jonka jälkeen takasin töihin kikkailemaan parin palvelimen kanssa. Ihan vielä loppuillasta, juuri ennen kotiinlähtöä päätti yksi replikointijärjestelmämme levypalvelin alkaa pottuilemaan ja väittää että kiintolevyiltä ei löydy käyttöjärjestelmää. Onneksi ongelma kuitenkin ratkesi vähän biossia ruuvaamalla ja kiintolevyjen imagen talteenotto saattoi jatkua.

Keskiviikko
Aamusta sitten ensitöikseen piti kusta purkkiin, nimittäin joku yövirtsan-keräyshässäkkä piti suorittaa tämän sokeritaudin takia. Kerran vuodessa haluavat nimittäin ottaa vähän enemmän verikokeita ja pistää tekemään tuon yövirtsankeräyksen. Sen jälkeen sitten terveyskeskuksen kautta töihin.

Töissä sitten heti ensimmäiseksi tutkittiin että edellisenä iltana korjattu palvelin oli edelleen ylhäällä ja toimi ongelmitta. Tulipahan myös huomattua että työkaverit oli olleet töissä vähän pitemmän kaavan mukaan, tosin eipä ollut ensimmäinen kerta. Siinä se päivä sitten vierikin omaa tahtiaan. Päivän aikana tuli viriteltyä yksi pelipalvelin lähestulkoon tuotantokuntoon, sekä tehtyä hankintalistaa AV-tavarasta mitä kokoustilaan tarvitaan. Tulipahan sitten lyötyä listaan ~200€ edestä kaapelia ja pikkunippeliä mitä pitää vielä kokoustilaan ostaa. Kun peli-ilta oli ohi niin pistettiin vielä edellisenä yönä otettu levyimage valumaan koneille ja lähettiin porukalla pois.

Torstai
Noh, mitäs tässä blogaillessa, nyt nukkumaan. Katotaan saisko tosta laitetilareissusta lähipäivinä vielä parempia kuvia, Christian kun niitä pari nappasi tuolla pyöriessämme.

Fuckyeah, sainpa ton Dellin ja levypakan ymmärtämään toisiaan, siitä lisää kuhan järjestelmä on valmis.

Mutta sitten, Assembly Summer 2009 on jo ensi viikolla ja täten on mun pääkin värjätty. On nimittäin tulossa perinne että hiukset aina jollain shokkivärillä assyja varten. Alla kuvasarja aiheesta.

Että sellanen, toi vihree ei nyt näy vielä kunnolla mutta vetäsen maanantaina siihen toisen kerroksen väriä, saas nähä mitä tulee :)

Mutta tällästä, nyt viikonloppuna olin siis Jennillä ja siellä sitten päivittelin Jennin pöytäkonetta. Lyötiin uutta näyttistä ja kovalevyä sisään. Ensviikolla vielä vähäsen muisteja tilaukseen ja vola, taas toimii :).

Eipä siinä muuta, lisää juttua tänne aiheesta jos toisestakin kuhan ehin kirjottamaan ja kasailemaan ajatuksia. Nyt vielä hetki säätelyä ja sitten nukkumaan, aamusta sitten töihin.

Jees, eilen lupasin jo kuvia ja juttua tosta raudasta mitä kävin pelastamassa ja tässäpä sitä sitten.

Alun perin piti hakea pois siis Promisc:in Vtrak 15200 iSCSI levypakka johon menee 15 kappaletta SATA kovalevyjä. Noh, mukaan tarttui tuon lisäksi yksi wanhahko Dell joka kantaa nimeä PowerEdege 2650. Dellissä on 2.8Ghz prossu ja tällä hetkellä vaan yksi kappale 36Gt SCSI levyjä. Muistia koneessa on ~2Gt. Koneet oli siis menossa jo kierrätyskeskukseen niin kävin ne romulavalta pelastamassa. Alla kuvia vielä kyseisistä laitteista ja vähän muustakin.

Loput kuvat klikkaamalla ylläolevaa kuvaa.

Mutta muuten sitten tänään ei mitään ihmeempää olekkaan tapahtunu, heitin tuon Ati Radeon HD 4850 kortin omaan koneeseen kiinni ja nappasin siitä 4650 kortin irti jonka heitän sitten huomenna Jennin koneeseen. Tämä vaihdos siksi koska Jennin koneen virtalähde ei tuota 4850 mallista korttia jaksa ajaa.

Töissä sitten varmistu että saan olla elokuunki palkkatyössä, yeah nyt saa käyttörahat lomareissulle jouluks \o/.

Mutta tällästä tänään, huomenna Jennille ja viikonlopun aikana hiusten värjäys Assemblyjen kunniaksi.