Funderar du på att köpa en ny dator? Under många år har skiljelinjen mellan en stationär dator och en bärbar dito varit tydlig. Ville du ha en dator för att surfa, skriva e-post och kanske betala räkningar med dög en bärbar dator utmärkt. Ville du spela spel eller köra mer tunga applikationer på en stor skärm var det en stationär maskin som gällde.

Idag ser det annorlunda ut. En bärbar dator kan på många områden konkurrera ut en stationär dator om man ser till prestanda kontra storlek, och fördelarna är ju många med en bärbar maskin.

Problemet för många, mig inkluderad, är att det idag har blivit allt svårare att välja dator. Att bestämma sig för om det är en stationär eller bärbar maskin kan vara enkelt om man ser till att spara plats hemma eller om man vill kunna ta med sig datorn på resa och liknande, men börjar man titta på prestandaspecifikationer är det inte fullt lika enkelt längre.

(Läs mer…)

I natt utförde vi lite underhåll i vår virtuella miljö. Detta eftersom vi rätt så nyligen upptäckte ett hårdvarufel i en del av vår nya virtuella miljö. Det var ett fel som vi förvisso kunde koppla oss förbi, men vi noterade ändå att det påverkade den totala prestandan i servermiljön.

Efter en dialog med vår hårdvaruleverantör Dell, samt ett antal tester i förväg, så var vi rätt så övertygade om att underhållet inte skulle påverka våra servrar och tjänster nämnvärt. Vi valde ändå att schemalägga det sent på kvällen/natten, för att minimera eventuella störningar.

Rent tekniskt så flyttade vi ett större antal virtuella servrar från en ESX (hårdvarunod) till en annan i VMware. Detta för att frigöra den trasiga hårdvaran och få den ersatt med ny och fullt fungerande hårdvara. Flytten i sig gick både snabbt och bra, men det uppstod ändå några komplikationer.

Av någon anledning så slutade nämligen nätverket att fungera för några virtuella servrar efter migreringen, däribland (den otursförföljda) VonAnka. Efter felsökning och dialog med Dell så lyckades vi lösa problemet. Vi får givetvis beklaga denna störning.

Flytten var dock inte av ondo. Det vi har vunnit på detta är desto mer intressant.

Vi har inte bara eliminerat ett hårdvarufel och frigjort utrymme för migreringen från FreeBSD till Linux, vi har dessutom fått upp en riktigt bra struktur för vårt nya system och anpassat vår virtuella miljö för den (globala) migrering som är planerad där.

Med anledning av den störning som drabbade servern VonAnka igår så vill vi lägga ut en fullständig och exakt redogörelse av hela händelseförloppet.

Strax innan 2 igår eftermiddag gick VonAnka ner och inom 3 minuter hade våra tekniker påbörjat en felsökning. Det konstaterades snabbt att ett hårdvarufel hade inträffat och vi kontaktade omedelbart Dell, som är vår serverleverantör. Vi har en servicenivå hos dem som innebär att de inställer sig hos oss inom 4 timmar om något händer, vilket är den bästa nivå som finns. Samtidigt begav sig två tekniker från oss iväg till vår serverhall.

Innan teknikern från Dell var på plats så påbörjade vi arbetet med att sätta upp en ny och virtuell server för VonAnka. Tanken var att vi skulle ha två möjliga lösningar, om den ena inte fungerade så skulle den andra ta vid. En backupåterställning påbörjades likaså, vilket tog lite tid eftersom det var 70 GB data som skulle upp på den virtuella servern.

Vid halv 6 dök teknikern från Dell upp. Efter att de hade försökt lösa hårdvarufelet i en timme, men inte lyckats, så beslutade vi oss för att fokusera på den virtuella servern. Vi ville inte riskera något med den uppenbart opålitliga hårdvaran. Någon timme senare fick Dell förvisso till en lösning på hårdvarufelet, men det hade krävts ytterligare disksynkroniseringar (vilket är tidskrävande) innan servern hade fungerat (på nåder dessutom).

Strax innan 8 var våra tekniker åter på vårt kontor och merparten av återställningen från backupen var likaså klar. Tack vare att vi måste köra 64-bitars FreeBSD på de virtuella servrarna, samtidigt som de fysiska servrarna kör 32-bitars FreeBSD (dvs, den gamla och felaktiga hårdvaran, med tillhörande data), så krävdes det en hel del handpåläggning innan den virtuella servern kunde komma igång.

Strax efter 11 i natt var den virtuella servern för VonAnka redo för våra kunder och tjänsterna kom igång fortlöpande därefter.

Under natten och förmiddagen idag har vi arbetat med att återställa allt på den nya VonAnka-servern. Eftersom servern återställdes från en backup som var ca 15 timmar gammal (vi tar backup dagligen) så har material (e-postmeddelanden och andra uppdaterade filer) som tillkom under torsdagen förts över från den tidigare servern allt eftersom. Vi har likaså synkroniserat samtliga inställningar med den tidigare servern och uppdaterat hanteringen av våra virtuella server-mallar så att liknande återställningar och driftsättningar ska gå ännu snabbare i framtiden.

Samtliga kunder på VonAnka kommer att kompenseras för det som har inträffat. Information om detta kommer att gå ut via e-post. Servern är som sagt migrerad till en annan miljö/hårdvara, så liknande problem ska inte kunna uppstå igen. Vi vill verkligen be om ursäkt för det som inträffade med VonAnka och vi hoppas att ni, med utgång från ovanstående redogörelse, förstår att vi gör vårt yttersta för att lösa problem som uppstår hos oss.

När jag en gång i tiden startade Aleborg Solutions från soffan i mitt vardagsrum så kunde jag inte ens drömma om att ha tusentals kunder och flera medarbetare. Jag kommer fortfarande ihåg hur överlycklig jag blev av att omsätta 20 000 kr på en månad. Idag omsätter vi helt andra summor, vilket medför ett avsevärt större ansvar och fler förpliktelser från min sida.

Med anledning av den senaste tidens driftstörningar på servarna VonAnka och Nemo så känner jag att det är dags att lägga korten på bordet. Jag kommer därför att förklara hur detta kunde ske och hur vi under en längre tid har arbetat för att skapa en bättre, snabbare och tryggare miljö för våra kunder och tjänster.

Binero idag

Binero, eller det tidigare Aleborg, har alltid växt organiskt. Men även om vi började från noll så har kvalité och långsiktiga lösningar alltid haft främsta prioritet. Allt eftersom vi har fått in nya kunder så har vi även haft möjlighet att göra nya investeringar i hård- och mjukvara.

Merparten av de servrar som vi haft från början (2001 och framåt) ersattes under 2006 och 2007 med helt nya servrar från Dell. Nemo, som drabbades av nedtid härom månaden, var inte ersatt (den är numera virtuell). Det var däremot VonAnka, men trots det så drabbades den av ett allvarligt hårdvarufel (som vi löste med Dell). Utöver detta har vi 3 st servrar som just nu håller på att virtualiseras/flyttas över till nya servrar.

När det gäller vår serverhall så har den alltid varit av högsta möjliga kvalité. Efter att ha hyrt utrymme i serverhallar hos DCS och Bahnhof så flyttade vi till Port80:s serverhall i Bankgirocentralen under 2005. I den serverhallen har vi en redundant anslutning till Internet, dvs om en förbindelse slutar fungera så tar en annan vid, och alla våra servrar är kopplade till batteri- och dieselaggregat.

Vid den här punkten finns det många webbhotell som tycker att dom är säkra, att allt är lugnt och att det räcker. Nu är inte Binero som alla webbhotell, som ni säkert vet.

Binero imorgon

Med utgång från vår kombinerade erfarenheter och kunskap av webbhotell och domäner, tillsammans med olika spjutspets-konsulter, så har vi tagit fram riktlinjer och krav för en helt ny serverplattform. Den nya plattformen är en unik lösning, som inget annat webbhotell i Sverige kommer i närheten av.

Sedan mer än ett halvår tillbaka har vi haft ett flertal möten och intensiva förhandlingar med olika leverantörer av mjuk- och hårdvara. Bland dessa märks bl a Microsoft, Dell, VMWare och Netapp. Det är alla företag som är ledande inom sina respektive områden.

I början av december -07 fick vi den första leveransen, ett flertal extremt kraftfulla servrar från Dell, till vår nya serverhall. Varje server innehåller bl a dubbla Xeon-processorer (med fyra kärnor i respektive processor) och stora mängder RAM.

Den nya serverhallen är Port80:s nybyggda hall i Hammarby Sjöstad. Det är en toppmodern anläggning, en av de bästa Stockholm har att erbjuda. Den nya serverhallen erbjuder oss maximal säkerhet, redundans och ordentliga utbyggnadsmöjligheter.

I varje server kör vi en programvara som heter VMware. För er som inte känner till VMware så är det en virtualisering-programvara, som bl a innebär att vi kommer kunna utnyttja dessa servrar maximalt. VMware kommer inte bara att ge oss tydliga fördelar vad det gäller prestanda och redundans, det innebär även en ökad miljövänlighet (vilket är rätt i tiden).

Servrarna är dessutom kopplade till externa lagringsenheter (servrar) som innehåller flera TB lagringsutrymme (1 TB = 1 000 GB). Allt är givetvis uppbyggt med RAID (så att diskar kan gå sönder utan att något påverkas). Eftersom vi kombinerar extern lagring med virtuella servrar (VMware) så har vi även möjlighet att automatiskt omfördela kunder mellan olika fysiska servrar (t ex om någon server kraschar) utan någon nedtid.

Backuphanteringen kommer förbättras avsevärt likaså, oavsett om det gäller återställning av en eller flera tusen filer. Vi kommer likaså att kunna ha en helt ny server uppe bara på några minuter.

Till allt detta har vi även en helt ny kontrollpanel. Det är en kommersiell lösning (inte egenutvecklad) som sedan tidigare används av några av världens största webbhotell. Även om det är en färdig lösning så är den modulbaserad, vilket innebär att vi kommer kunna anpassa den efter våra kunders önskemål och behov.

Den nya kontrollpanelen har stöd för både Windows och BSD/Linux. Med den kommer vi börja erbjuda webbpaket som innehåller båda operativsystemen (så att man kan köra både t ex PHP och .NET i samma paket). Samtliga tjänster (webb, e-post, databaser osv) är placerade på separata servrar för bästa möjliga prestanda. Den nya kontrollpanelen har likaså stöd för Windows Server 2008 (!).

När är allt klart?

När det gäller större IT-projekt så bör man egentligen inte garantera ett datum för lansering. Vi har istället satt upp ett mål om att ha allting klart fram till sommaren. Introduktionen av vår nya plattform kommer att ske successivt. Vissa saker kommer ni märka av, andra saker kommer gå obemärkta förbi. Som alltid kommer vi vara så tydliga som möjligt och informera våra kunder, både via e-post och vår hemsida/blogg.

Så där, korten ligger på bordet kära vänner och kunder (och branschkollegor). Vi tror verkligen stenhårt på framtiden, samtidigt som vi gör vårt yttersta för att hantera det vi har idag. Nu vet ni var vi är idag och vad som händer imorgon. Hoppas ni fortsätter följa oss här framöver.

Under helgen som gick har vi haft problem med FreeBSD-servern VonAnka. Problemen beror på en konflikt mellan FreeBSD och RAID-kortet på servern. För att försöka lösa det här hade vi tekniker på plats i vår serverhall i natt, med uppgift att virtualisera VonAnka.

Efter flera timmars arbete med att konvertera servern till en virtuell version (och med bara ett fåtal MB kvar) så gick något snett. Konverteringen misslyckades.

Vi har istället satt upp en ny (virtuell) server för VonAnka och arbetet med att flytta kunder, från den gamla till den nya servern, pågår för fullt. Exakt när vi är klara kan vi inte säga, vi arbetar dock dygnet-runt (som vanligt) för att lösa detta.

Vi får verkligen beklaga de problem detta har orsakat er. Samtliga kunder på VonAnka kommer att kompenseras med två månader extra kostnadsfri tid för sina webbpaket.

Den nya serverplattformen är något som vi har arbetat med i det tysta en längre tid. Det är en plattform som består av ett flertal extremt kraftfulla servrar, som är virtualiserade med VMware. Serverplattformen står i Port80:s nya serverhall i Stockholm. Även till den nya serverhallen är Internetanslutningen redundant och vi har likaså batteri- och dieselbackup för all vår utrustning. Mer information om vår nya serverplattform kommer så småningom här framöver.

Uppdatering [2008-01-22 08:25]: Pga att störningarna ökade under måndagen så var det inte möjligt att flytta kunder från VonAnka, enligt tidigare plan. Vi har istället haft tekniker från oss och Dell på plats i vår serverhall hela natten. De har bytt ut RAID-kortet och samtliga diskar på VonAnka. Detta arbete innebar en del nedtid i natt. Nu är dock servern åter uppe och fungerar, utan några som helst felmeddelanden eller störningar.