Roland Kamphuis Rotating Header Image

Posts Tagged ‘stroom’

Kantoorservers naar datacenter

kantoorservers

Oude situatie kantoorservers

De servers voor ons kantoor stonden tot voor kort gewoon bij ons op kantoor. Met de komst van ons eigen datacenter hebben we eigenlijk nooit de moeite genomen om de servers te verplaatsen. We hadden wel de internelijn doorgetrokken en daarmee verviel de behoefte om de kantoorservers te verplaatsen. De kantoorservers hadden we heel netjes onder de trap opgesteld in een een net 19 inch rack. Omdat de locatie van de servers een beetje verscholen was wou ik geen foto’s publiceren. Nu in het datacenter zijn er voldoende sensoren, detectoren en camera’s die de veiligheid garanderen.

Waarom alsnog de servers verplaatsen?
Tijdens het bekijken van de jaarafrekening van de energieleverancier kwam ik erachter dat het 10 euro per maand aan stroomkosten bespaard als we de servers in het datacenter plaatsen. Die 10 euro is zelfs wat overblijft na aftrek van het extra stroom benodigd voor de koeling en ups.
Daarnaast hebben we in de zomer een probleem dat de servers op kantoor te warm worden doordat er geen airco aanwezig is.

Hoe kan de stroom nog geen 5 meter verderop goedkoper zijn?
In ons datacenter zijn we een grootverbruiker, en daarmee kan je een scherper tarief krijgen. Hoewel dit deels waar is, is dit prijsverschil nog te minimaal om de grote besparing te maken. De grote besparing zit hem namelijk in de energiebelasting die de overheid heft over de stroom. Als je namelijk > 10.000 kWh verbruikt zakt de belasting met de helft per kWh. Verbruik je meer dan 50.000 kWh/jaar, is de energiebelasting nog maar een tiende van het origineel.
Op kantoor is ons stroomverbruik minder dan <10.000kwh, terwijl in ons datacenter het stroomverbruik >50.000 kWh is. We besparen een 9 cent per kWh, dat is bijna de helft van de prijs die we op het kantoor betalen.

Het eindresultaat van de kantoorservers:

kantoorservers_interdc

Onze kantoorservers in InterDC

 

Van boven naar beneden:

  • HP 3400cl Switch
    (Gbit switch)
  • HP micro Proliant server
    (Storage)
  • Monitor
  • Supermicro Server
    (VPS server, Dual Quadcore 2,4 Ghz, 24GB ram, 2x1TB HDDs)
  • Chenbro Server
    (Windows server 2008, Share + Domain controller)
  • APC 1KvA UPS
    (Noodstroom)

Hardware project: kwh meten

Afgelopen weken ben ik iedere vrijdag bezig geweest met een nieuw hardware project. Met het nieuwe project ben ik bezig een slimme stroometer te bouwen die via ethernet uitleesbaar is. Ideaal voor het datacenter (Interdc) om het stroomgebruik per rack bij te kunnen houden.
Ik was eerst begonnen met ampère meters die je op over de kabel heen klemt en op basis van magnetische inductie kunnen bepalen hoeveel ampère stroom erdoor heen ging. Deze ampère meters waren moeilijk verkrijgbaar dus keek ik naar een alternatieve oplossing. Op internet las ik hoe veel hobbyisten heel creatief een pulsenteller hadden gemaakt die werkt aan de hand van het lampje dat knippert op de stroommeter. Ik heb weliswaar geen hoofdmeter per rack zitten, maar ik had wel een kleine kWh teller al laten aansluiten. Bleek dat die meter  zelfs een eigen uitgang had om de pulsen door te geven. Het was dus een kwestie van een kabeltje eraan hangen en de microcontroller laten tellen. Tenminste dat dacht ik.

kwh_teller

Microcontroller met ethernet en poe en de benodigde hardware

De microcontroller was de grootste obstakel, de microcontroller loopt op 32mhz singlecore en moet 10 meters gelijktijdig in de gaten houden of er een signaal (pulse) binnenkomt. Een buzzywait constructie werkte niet, als op meter 1 en 10 tegelijk een pulse binnenkomt, was de pulse signaal al verdwenen voordat de while-loop bij poort 10 aankwam. Daarnaast moest dezelfde microcontroller ook nog een communicatie via ethernet opzetten.
Uiteindelijk heb ik het dan ook opgelost door op basis van interrupts te gaan werken. Het systeem wordt tijdelijk onderbroken zodra een status van een kWh meter wordt veranderd. Doet zijn tel actie en gaat vervolgens verder waar hij was gebleven. Het resultaat; precieze kWh stroommeting waarbij ik nauwkeurig terug kan rekenen naar Ampères.

kwh_meters

De kwh meters van iedere groep

ampere_tang_meten

Natuurlijk met de ampere tang controleren of mijn gemeten pulsen overeenkomen

Overstappen van energie leverancier

vastelastenconsulentEind 2012 werd ik benaderd door dhr. R. Moumen van www.devastelastenconsulent.nl met het idee om samen met meerdere datacenters gelijktijdig energie in te kopen. Doordat je samen veel meer stroom verbruikt dan de partijen los, kunnen de energieleveranciers een scherper tarief geven. Het jammere was dat bijna het nieuwe jaar al begon en veel datacenters al contracten hadden afgesloten voordat dit goede idee te horen kregen. Het plan ligt er dan ook om per 2014 samen in te gaan kopen.

In de tussentijd heb ik zelf gekeken naar wat wij nu betalen voor energie en wat op dit moment de energie prijzen zijn. En het viel mij op dat de energieprijzen gedaald waren en dat wij bij Eneco eigenlijk teveel betaalde. Wij zijn in 2010 bij Eneco klant geworden omdat ze toen op dat moment de goedkoopste waren maar blijkbaar is Eneco niet mee gedaald met de prijzen van andere leveranciers.
Heb ik toch even Eneco gebeld of er geen mogelijkheid was dat ze een scherper tarief konden aanbieden, we zijn immers geen kleinverbruiker meer zoals in 2010. Inmiddels is het verbruik behoorlijk gestegen en stijgt nog steeds met ons datacenter. Blijkt het gewoon dat ik heel makkelijk aan de telefoon een scherper tarief kreeg zonder dat ik daar al te veel moeite voor moest doen.

Voordat ik hierop inging ik heb opnieuw dhr. Moumen gecontacteerd met de vraag wat ze nu al voor ons konden doen. Zodoende heb ik een nog scherper tarief weten te bemachtigen bij Eon en zijn we overgestapt. Een prijsverschil van nog geen cent per kWh levert ons al een besparing op van bijna duizend euro per jaar. Dus dan is het zeker de moeite waard om op de “kleintjes” te letten.

Na enkele weken van aangaan van het contract kreeg ik een leuk presentje binnen:

100% groene energie ingekocht afkomstig van waterkracht

100% groene energie certificaat, afkomstig van waterkracht

Tot slot wil ik melden dat devastelastenconsulent klant bij ons is voor hosting, en dat wij de tool op de website hebben gebouwd om prijzen te vergelijken en te kunnen aanmelden bij Eon. Zo sneed het mes aan 2 kanten.

Nieuw stroomnetwerk in InterDC

Begin april is onze elektricien al begonnen met het gereedmaken van het nieuwe elektra netwerk. Ik zal in het kort uitleggen wat er veranderd is.

Oude situatie
Stroom komt ons pand binnen wordt direct verdeeld en gaat naar de racks toe. In de racks hangt een 3u UPS van Apc die voor 30-40min noodstroom voorziet.

Nieuwe situatie
Stroom komt ons pand binnen en wordt als eerste naar de achteren geleid. Daar gaat de stroom eerst langs de toekomstige noodstroomaggregaat en wordt de stroom verdeeld over 2 stroomfeeds (verdeeld over de 3 fases). Een van de feeds gaat langs onze Ups. Vanaf daar gaat de stroom naar de racks.
Bij de schakeling door de UPS hebben we een by-pass paneel aangelegd, zodat we in de toekomst eenvoudig meer upsen kunnen toevoegen en onderhoud kunnen plegen zonder dat we de stroom hoeven te onderbreken!
Daarnaast zijn alle kabels alvast gekozen voor het maximale stroomverbruik zodat we deze niet meer in de toekomst hoeven te veranderen.

Nu de nieuwe situatie is afgerond kunnen de kleine upsen in de racks weggehaald worden. Wel laat ik de kleine UPS in de swtich/router rack hangen voor extra noodstroom.

De nieuwe UPS die achterin staat is een APC Galaxy 5000 UPS, welke goed is voor 30 kasten van stroom te voorzien. Mochten we 30 racks vol hebben kunnen we zonder onderbreking een 2e en een derde (n+1) unit toevoegen. Op moment geeft de Galaxy 5000 ons een accutijd van 1 uur en 17 minuten.

Tot slot hebben we ook de stroomfeeds aangelegd voor de 2e rij racks (2 feeds per rack, non-break & short-break).

Overstappen
Het moment van overschakelen tussen de oude voorziening naar de nieuwe stroomvoorziening vond plaats op 18 mei. Gedurende anderhalf uur hadden de racks geen stroom. Dat betekend niet dat het apparatuur offline ging. Met een flink aantal tijdelijke kabels midden door de gangpaden heen konden we het gat overbruggen. Het omschakelen leverde ook geen downtime op omdat de racks allemaal een eigen UPS had die een half uur stroom capaciteit had.
Totale downtime operatie: 0 min, 0sec.
Wel waren er 2 servers tijdens de hele operatie plotseling vastgelopen. De vraag is of dat pure toeval is of ergens een verband gelegd kan worden.

Nadat de servers over waren was het tijd om de airco over te zetten. Die ging gelukkig wat sneller omdat de nieuwe kabels al klaar lagen. En na een 5 min zonder koeling te hebben gezeten draaide de airco weer op volle toeren.

Vervolg
Om de 2e fase af te maken staan er nog 2 actiepunten open:
– Branddetectie systeem (VESDA)
– Acces control (zelfstandige toegang d.m.v. pasjes)
Beide punten zijn al in gang gezet.
En mocht het meezitten wil ik ook het noodaggregaat eind zomer hebben staan.

Voor nu een aantal foto’s:

 

InterDC: UPS bypass paneel

Eindelijk weer eens een post over InterDC. In februari heb ik de 2e bouwfase gestart van ons datacenter. Dat houd in dat de 60Kva (reeds aanwezig) aangesloten moet worden. Daarbij moest het hele stroomnetwerk veranderd worden. Eén van de key-elementen van het nieuwe stroomnetwerk is het bypass paneel. Dit is een paneel waarmee we de UPS met 1 schakelaar uit de stroomkring kunnen halen ZONDER STORING. Ofwel dit is een flink staaltje techniek wat een flink prijskaartje heeft. Het bypass paneel is op maat gemaakt, want we wouden totaal 3 ups-en eraan kunnen hangen, zodat we in de toekomst makkelijk nog 2 nieuwe ups-en kunnen toevoegen.

Wij hebben afgelopen vrijdag eindelijk het bypass paneel binnengekregen en daarmee zijn alle onderdelen binnen om de upgrade te starten. Hieronder een foto van het paneel.

InterDC: Airco geplaatst

Na lang onderzoek naar de beste koeloplossing heb ik eindelijk een geschikte oplossing gevonden. Ik heb gekozen voor een downflow airco unit van het merk Uniflair. Deze unit blaast koude lucht onder de vloer zodat de lucht door ventilatie tegels voor de racks uitkomt. De servers in de racks zuigen de lucht aan en vervolgens zuigt de airco unit de warme lucht weer af.
Buiten op het dak worden dan chillers geplaatst om de afgevoerde warmte weer om te kunnen zetten in koude vloeistof.

Dinsdag was het zover, de hele installatie werd vandaag geleverd en geïnstalleerd. Om 6.30 stond de kraan al voor de deur die de chillers op het dak moest gaan takelen. Nadat de chillers op het dak stonden kon de andere unit de datavloer opgereden worden. Vervolgens gingen de monteurs bezig met het plaatsen van het leidingwerk. De doorvoer naar het dak hadden we zelf al eerder moeten maken. Echter bleken de monteurs een bepaalde dakdoorvoer te willen, welke niet van te voren besproken was. Dus hebben we op het laatste moment nog een dakdekker moeten regelen.

Om 13:00 uur waren de monteurs klaar om de stroom aan te sluiten en de unit te gaan testen. Echter bleek de 3 fase aansluiting (5-pins) maar 4 aders te hebben en was de stroomkabel dus niet geschikt.  Daarmee moest het testen uitgesteld worden tot de volgende dag.
Ik heb dezelfde dag nog mijn elektricien gebeld en die kon ‘s avonds als spoed klus een nieuwe kabel aanleggen.

De volgende ochtend kwamen de monteurs weer langs (dit keer gelukkig niet zo vroeg; 8.30) en hebben we de airco unit in werking gesteld. Op moment van inschakelen was het ongeveer 28 graden op de datavloer. Dat was met een uur direct gedaald naar 20 graden. Ofwel een super systeem.
Op moment staat de temperatuur ingesteld op 22 graden (+- 1 graad).

InterDC: stroomvoorziening

Ieder rack in het datacenter krijgt een eigen stroomgroep. De stroom aansluitingen gaat op basis van het IEC 60309 standaard. Dat houd in dat via een blauwe campingstekker aansluiting stroom verkregen kan worden.
Iedere groep is voorzien van een digitale kWh meter. Per groep van 10 racks lopen er dikke 5 aderige / 3 fase kabels vanaf de lokale stroomverdeling op de datavloer naar de hoofdschakelkast.

Iedere rack krijgt standaard 1 aansluiting van max. 16 ampère. Indien gewenst kan er een 2e groep aangelegd worden.

De stroom die we inkopen is groene stroom welke bestaat uit 22% windenergie, 64% waterkracht en 14% biomassa. In de eerste opleveringsfase van het datacenter zal er nog geen aggregaat geplaatst worden maar wel een UPS systeem. Dit systeem is inmiddels aangeschaft en staat klaar om opgehangen te worden. De UPS zal genoeg stroom leveren om 15 minuten tot 30 minuten onderbreking te overbruggen, afhankelijk van de belasting.
In fase 2 wordt wel de noodaggregaat geplaatst.

Hieronder een foto van een aantal schakelingen, stroomaansluiting en kWh meter.

Reactie van Greenchoice op blog item

Vandaag vond ik een reactie van GreenChoice op mijn post over Greenchoice.
In de reactie wordt uitgelegd waarom deze splitsing tussen consument en zakelijk is ontstaan bij Greenchoice. Ook boden ze aan om alsnog een zakelijke aanbieding te doen.

Ten eerste vind ik het top dat een bedrijf opzoek gaat naar posts en ongemakkelijke situaties probeert op te lossen. Hiervoor mijn complimenten. Helaas heb ik voor mijn bedrijf al gekozen voor Groene stroom bij een concurrent.

Aan Greenchoice geef ik de tip: Onderscheid de zakelijk gebruikers tussen mkb en groot zakelijk. Dit doen de meeste Energieleveranciers. Waarbij de zakelijke mkb dienst weinig zal verschillen dan met de particuliere variant.

De definities van Greenchoice

Omdat ons kantoorpand ook stroom en gas nodig heeft, heb ik afgelopen tijd met meerdere leveranciers gebeld. Vandaag belde ik Greenchoice omdat ik na 2 weken geen reactie had ontvangen op mijn offerte aanvraag.
Aan de telefoon werd ik goed behandeld en de meneer excuseerde zich dat de offerteaanvraag niet behandeld was. Toen hij echter vroeg wat ons geschatte verbruik was, vertelde hij mij dat ik niet bij de zakelijke / mkb afdeling moest zijn maar bij de consumenten. Ik vroeg “hoezo? ik wil voor mijn zaak een zakelijke aansluiting” waarop de meneer vertelde dat je geen zakelijke afnemer bent als je minder dan 10.000kwh per jaar verbruikt. Wat ik dus een bijzonder vreemde definitie vindt, en bovendien discriminerend.

Je mag blijkbaar als ondernemer niet “groen” zijn. (Voor ons nieuwe kantoorpand heb ik expres gekozen voor duurzame producten, zoals LED monitoren, zuinige computers, zuinige verlichting, etc.) Wat vrij bijzonder is omdat Greenchoice zelf wel voor groen staat.

Nee, geen Greenchoice voor ons als ze ons zo behandelen!