Roland Kamphuis Rotating Header Image

Posts Tagged ‘Datacenter’

Timelapse film over bouw InterDC

Bijna 2 jaar na opening van mijn datacenter heb ik eindelijk alle beelden verzameld om een timelapse op te stellen. Een timelapse is een film waarin de beelden versneld afgespeeld worden.
Het samenstellen van de timelapse was meer werk dan ik dacht. Het werk zat hem voornamelijk in het uitzoeken van alle beelden. Ik heb namelijk alle beelden verwijderd wanneer er niks te zien was. Zoals bijvoorbeeld de weekenden, vroege ochtenduren en avonden, maar ook tussenin wanneer bijvoorbeeld alle bouwvakkers naar buiten stapten om te pauzeren. Ik denk dat ik door een 140.000 beelden wel ben heengelopen en zeker wel de helft heb verwijderd voor de film.

In de timelapse heb ik van bijna 4 maanden beelden verzameld. De camera’s hebben nog wel veel dagen beelden gemaakt maar die zijn net niet interessant genoeg om toe te voegen. Bovendien had ik daaraan nog meer extra uitzoek werk gehad. Wellicht dat ik ooit nog in de toekomst dat doe. Kan ik wellicht een moeite timelapse maken van hoe de racks allemaal gevuld zijn. Op deze timelaps zie je in het eerste racks de switches en router hangen, en in rack 2 zijn net 4 servers verzameld en opgehangen. Die had ik al namelijk al tijdens de laatste fase van de bouw opgehangen omdat sommige klanten niet konden wachten ;).
Inmiddels hangen er 80 servers van ons in InterDC, dat is exclusief colo servers van klanten.

Film aanleg glasvezel InterDC

Nadat bijna 2 jaar het filmmateriaal van de aanleg van de glasvezel van interdc op de plank heeft gelegen heb ik toch besloten een mooi filmpje te maken.
Ik was zeer verbaasd dat er verschillende websites zijn waar het mogelijk is om (commerciele) rechten vrije muziek te downloaden. Ik dacht dat je dan zelf iets in elkaar moest componeren of toevallg een band moest kennen. Youtube zelf bied ook een dienst aan om muziek toe te voegen aan je filmpje, maar het nadeel daarvan is dat je verplichte reclame krijgt en bovendien kan je niet het geluid bewerken op basis van je film inhoud.

Met wat hulp van collega’s Christian en Andy hebben we samen het volgende filmpje samengesteld:

Nieuw stroomnetwerk in InterDC

Begin april is onze elektricien al begonnen met het gereedmaken van het nieuwe elektra netwerk. Ik zal in het kort uitleggen wat er veranderd is.

Oude situatie
Stroom komt ons pand binnen wordt direct verdeeld en gaat naar de racks toe. In de racks hangt een 3u UPS van Apc die voor 30-40min noodstroom voorziet.

Nieuwe situatie
Stroom komt ons pand binnen en wordt als eerste naar de achteren geleid. Daar gaat de stroom eerst langs de toekomstige noodstroomaggregaat en wordt de stroom verdeeld over 2 stroomfeeds (verdeeld over de 3 fases). Een van de feeds gaat langs onze Ups. Vanaf daar gaat de stroom naar de racks.
Bij de schakeling door de UPS hebben we een by-pass paneel aangelegd, zodat we in de toekomst eenvoudig meer upsen kunnen toevoegen en onderhoud kunnen plegen zonder dat we de stroom hoeven te onderbreken!
Daarnaast zijn alle kabels alvast gekozen voor het maximale stroomverbruik zodat we deze niet meer in de toekomst hoeven te veranderen.

Nu de nieuwe situatie is afgerond kunnen de kleine upsen in de racks weggehaald worden. Wel laat ik de kleine UPS in de swtich/router rack hangen voor extra noodstroom.

De nieuwe UPS die achterin staat is een APC Galaxy 5000 UPS, welke goed is voor 30 kasten van stroom te voorzien. Mochten we 30 racks vol hebben kunnen we zonder onderbreking een 2e en een derde (n+1) unit toevoegen. Op moment geeft de Galaxy 5000 ons een accutijd van 1 uur en 17 minuten.

Tot slot hebben we ook de stroomfeeds aangelegd voor de 2e rij racks (2 feeds per rack, non-break & short-break).

Overstappen
Het moment van overschakelen tussen de oude voorziening naar de nieuwe stroomvoorziening vond plaats op 18 mei. Gedurende anderhalf uur hadden de racks geen stroom. Dat betekend niet dat het apparatuur offline ging. Met een flink aantal tijdelijke kabels midden door de gangpaden heen konden we het gat overbruggen. Het omschakelen leverde ook geen downtime op omdat de racks allemaal een eigen UPS had die een half uur stroom capaciteit had.
Totale downtime operatie: 0 min, 0sec.
Wel waren er 2 servers tijdens de hele operatie plotseling vastgelopen. De vraag is of dat pure toeval is of ergens een verband gelegd kan worden.

Nadat de servers over waren was het tijd om de airco over te zetten. Die ging gelukkig wat sneller omdat de nieuwe kabels al klaar lagen. En na een 5 min zonder koeling te hebben gezeten draaide de airco weer op volle toeren.

Vervolg
Om de 2e fase af te maken staan er nog 2 actiepunten open:
– Branddetectie systeem (VESDA)
– Acces control (zelfstandige toegang d.m.v. pasjes)
Beide punten zijn al in gang gezet.
En mocht het meezitten wil ik ook het noodaggregaat eind zomer hebben staan.

Voor nu een aantal foto’s:

 

InterDC: promotievideo

Vandaag kreeg ik de gesproken tekst binnen van de voice-acteur bedoeld voor een radio spotje op de lokale omroep. Terwijl ik na het spotje zat te luisteren dacht ik bij mijzelf, zou het niet mooi zijn om hier wat beelden aan toe te voegen. Ofwel we hadden opeens een heel ander programma vrijdag op kantoor: het maken van een promotievideo. De ochtend hebben we besteed om de beelden te schieten. ’s Middags een aantal uur op de bewerk-tafel gelegen en eind van de middag was de promotievideo af. Zie hieronder het resultaat:

Reactie op aankondiging van ons nieuwe datacenter

Ik heb op Msn in mijn titel het bericht staan dat we een eigen datacenter hebben geopend om zo eventuele geïnteresseerde binnen te halen. Ik vond deze reactie later terug in de msn logs, maar hij is prachtig:

Dhr.S  – Niet Hier. says (23:47):
Eigen datacenter?
Dhr.S  – Niet Hier. says (23:48):
Je bedoeld zeker een Server Rack?
Eigen datacenter is een te grooooot woord, dan moet je wel zeer veel klanten hebben.
Roland | IceHosting says (23:52):
hebben we ook
Dhr.S  – Niet Hier. says (23:52):
een datacenter??
Roland | IceHosting says (23:52):
ja
Dhr.S  – Niet Hier. says (23:53):
waar is t voor nodig, als de 1 miljoenste klant niet bereikt is?
Roland | IceHosting says (23:53):
?
Dhr.S  – Niet Hier. says (23:53):
Tevens is icehosting geen bekende webhosting.
Roland | IceHosting says (23:53):
eeh
jij zegt dus dat er maar 15 datacenters in nederland mogen zijn
als 1 miljoen klanten een vereiste is
en ten tweede
Roland | IceHosting says (23:54):
icehosting is wel bekend, maar wellicht niet bij jouw?
Dhr.S  – Niet Hier. says (23:54):
Daarbij laat je taalgebruik ook eens zien dat je geen professional bent, en Ice Hosting idd niet bekend is.
Roland | IceHosting says (23:54):
nouja, moet jij weten
Roland | IceHosting says (23:55):
wij openen over 2 weken ons eigen datacenter in enschede
met ruimte voor 60 racks
een goede 1800 servers kunnen daarin
Dhr.S  – Niet Hier. says (23:56):
Toch nog steeds overbodig vind ik..

Het gesprek ging even door en uiteindelijk begreep de persoon dat wij toch wat groter waren dan hij dacht, en vond hij het wel mooi :)

InterRacks 6 jaar

Vandaag werd mijn 2e bedrijf InterRacks 6 jaar. Wat natuurlijk een hele milestone is.

Met InterRacks ben ik afgelopen maanden druk bezig geweest met dochteronderneming InterDC. InterDC is een datacenter in Enschede die binnenkort haar deuren zal openen. Op mijn weblog heb ik hierover al diverse post geschreven.

InterDC bevindt zich in de afrond fase, en ik zal komende week weer een aantal artikelen plaatsen over het datacenter.

Bouw eigen datacenter

Al enkele maanden ben ik bezig met de bouw van ons eigen datacenter voor mijn bedrijf InterRacks in samenwerking met mijn bedrijf IceHosting.  De aanleiding van de bouw van een eigen datacenter heeft te maken dat ik al langere tijd aan het kijken was naar datacenters in de buurt van waar ik woon en werk. De aanwezige datacenter’s rekenen een best behoorlijk bedrag en daarmee net zo duur als een datacenter in Amsterdam. Terwijl je zal verwachten dat de kosten hier in het oosten lager kunnen.
De tweede reden is van de bouw van een eigen datacenter is dat mijn bedrijven weer kunnen groeien. Afgelopen 2 jaar zijn mijn bedrijven alleen maar oude servers aan het vervangen. Want voor een oude server kan je 2 nieuwe servers ophangen (aan stroomverbruik).

De naam voor het nieuwe datacenter is: InterDC met als website: www.interdc.nl.
Het datacenter is gevestigd in Enschede, direct naast ons kantoor.

Aan het datacenter is al hard gewerkt en de einde van de werkzaamheden is in zicht. Het datacenter zal met ongeveer een maand geopend worden. Het datacenter beschikt over totaal 200m2 waarvan 120m2 datavloer oppervlakte. Daarmee kunnen we een goede 60 racks plaatsen. Dat betekend dat het datacenter naast onze eigen servers ook servers kan huisvesten van andere bedrijven.

De komende weken zal ik een aantal blog posts plaatsen met meer informatie van het datacenter. Voor nu raad ik aan de website te bezoeken voor meer informatie van het nieuwe datacenter.

Mijn eerste YouTube upload

Vandaag ben ik maar eens met YouTube wezen spelen. Ik had tot vandaag nog geen account, laat staan een video geupload. In mijn archief vond ik 2 filmpjes van IceHosting in het datacenter. Ik heb deze dan ook geupload.

Het systeem van YouTube werkt best snel, maar HD video’s uploaden duurt een eeuwigheid.

De video’s:
IceHosting Router rack in GlobalSwitch (2008)
IceHosting servers in Redbus (2005) (1/2)
IceHosting servers in Redbus (2005) (2/2)

Datacenter bezoek

Afgelopen donderdag ben ik naar Amsterdam Globalswitch geweest voor wat onderhoud en 5 nieuwe servers te plaatsen. Nieuw was dat we de Foundry Fastiron hebben uitgefaseerd en mee moest naar het kantoor. De Fastiron is de coreswitch in ons netwerk en beschikt over 4 glaspoorten en 156 100mbit poorten. De switch heeft 4 voedingen van 500watt en weegt daarmee een goede 30-40 kg.

Ook zijn de HP proliants servers meegegaan naar kantoor. Dit waren de servers die alle resellerpakketten aan het hosten waren. Met een leeftijd van 5 jaar waren deze ook aan vervanging toe.

Met de vervanging van de HP’s en de Fastiron switch werd er behoorlijk wat stroom bespaard. Deze stroom kan dan weer gebruikt worden om extra servers te plaatsen.
Bij Globalswitch zitten we namelijk al enige tijd tegen ons stroomlimiet, en doordat we servers blijven vervangen kunnen we nog groeien. Maar het einde van oude servers is bijna in zicht en dan zullen we toch rackruimte en energie ergens anders vandaan moeten halen.

Lek in Linux 64 bits kernel

Ik was begin deze week al door een klant op de hoogte gebracht dat er een lek was in de 32 bit emulatie bij de 64 bits kernel van Linux. Hier zouden hackers vrij makkelijk root toegang kunnen verkrijgen op de server. Ik dacht dat dit lek wel mee zou vallen, maar zondag bleek de eerste 2 machines gehackt te zijn. Dus als een gek heb ik de hele Zondag en Maandag alle 84 servers van ons lopen updaten. Per server was ik namelijk 20 minuten kwijt. Bij het updaten van de kernel heb ik direct ook op alle servers de laatste versie van alle softwarepakketten erop gezet. Na 2 dagen lang werk was het updaten klaar.
Nadat de server geupdate is moet deze ook opnieuw opgestart worden om de nieuwe kernel te kunnen booten. 84 servers rebooten is iets wat ik niet graag doe omdat er een kleine kans bestaat dat de machine niet meer online komt. Uiteindelijk zijn er 2 machines niet meer online gekomen. De eerste bleek naast het reboot commando ook nog een harde reset nodig te hebben (met de apc), en voor de laatste ben ik dinsdag naar het datacenter gegaan waar bleek dat het moederbord defect leek te zijn.

Dat waren 3 drukke dagen (en mijn weekend), maar gelukkig draait alles nu weer lekvrij :-)

Previder rondleiding

Vandaag was ik langs het nieuwe datacenter van Introweb genaamd Previder DC2 welke nog maar enkele maanden in gebruik was genomen. Previder is tevens de nieuwe naam die meeste diensten van Introweb moet gaan overnemen.
Toen ik in 2006 ook op bezoek  bij introweb was
hadden ze alleen een mini-datacenter in hun eigen kantoorpand gebouwd voor een +- 10 racks.

De rondleiding die ik gekregen had was indrukwekkend. Introweb is van een klein datacentertje gegroeid naar een datacenter met ruimte voor meer dan 300 800 racks verdeeld over 4 zalen.
De indicatieprijzen voor een rack vond ik aan de hoge kant als ik deze vergelijk met datacenters uit de regio en datacenters uit Amsterdam. Previder zal nog een offerte opsturen, dus ben zeer benieuwd wat ze met de prijs kunnen doen. Wellicht dat het dan interessant wordt om hier een extra rack te huren en vanaf hier ook diensten te gaan aanbieden.