Grön energi! Bild från Clker.com

I takt med att allt fler konsoliderar, virtualiserar och moln-ifierar sina datacenter ökar mängden beräkningar som görs i centrala datahallar. Det betyder bland annat att den kylning som tidigare gjordes i kontorslokaler i större utsträckning nu måste göras i datahallarna.

Detta ställer nya krav på mätning av energieffektivitet eftersom det mesta av den energi som används för att driva saker sen måste ledas bort i form av värme. Då vi på Binero är extremt intresserade av då vi ständigt försöker hålla vår miljöpåverkan till ett minimum och vår datahall har just nu 1,39 i PUE-tal, och använder certifierad vattenkraftsel.

(Läs mer…)

De senaste veckorna har vi på driftsidan arbetat intensivt med migreringen från FreeBSD till Linux. Vi har både flyttat kunder mellan olika servrar och operativsystem samt identifierat och isolerat hemsidor som orsakat störningar hos oss. Och arbetet har börjat ge resultat, både i form av lägre belastning och färre störningar.

I natt kommer vi att påbörja migreringen av VonAnka, från FreeBSD till Linux. Vi har tidigare redan flyttat bort ett större antal kunder från VonAnka, men nu kommer hela servern att försvinna från oss. Även om killarna skrotade VonAnka (fysiskt) tidigare så har dess virtuella efterföljare tagit sig friheten att fortsätta leva loppan (med driftstörningar till följd).

Men nu är det snart över.

Samtliga berörda kunder har sedan tidigare informerats om detta och vi kommer givetvis att ha silkesvantarna på oss under hela migreringen. För att minimera den påverkan som migreringen kommer att ha så sker den sent i natt (vi börjar vid 1-tiden) och vi kommer köra den i etapper (om 50-100 kunder) flera nätter i rad. Som under tidigare migreringar så kommer vi även hålla binerodrift.se uppdaterad under tiden.

I natt utförde vi lite underhåll i vår virtuella miljö. Detta eftersom vi rätt så nyligen upptäckte ett hårdvarufel i en del av vår nya virtuella miljö. Det var ett fel som vi förvisso kunde koppla oss förbi, men vi noterade ändå att det påverkade den totala prestandan i servermiljön.

Efter en dialog med vår hårdvaruleverantör Dell, samt ett antal tester i förväg, så var vi rätt så övertygade om att underhållet inte skulle påverka våra servrar och tjänster nämnvärt. Vi valde ändå att schemalägga det sent på kvällen/natten, för att minimera eventuella störningar.

Rent tekniskt så flyttade vi ett större antal virtuella servrar från en ESX (hårdvarunod) till en annan i VMware. Detta för att frigöra den trasiga hårdvaran och få den ersatt med ny och fullt fungerande hårdvara. Flytten i sig gick både snabbt och bra, men det uppstod ändå några komplikationer.

Av någon anledning så slutade nämligen nätverket att fungera för några virtuella servrar efter migreringen, däribland (den otursförföljda) VonAnka. Efter felsökning och dialog med Dell så lyckades vi lösa problemet. Vi får givetvis beklaga denna störning.

Flytten var dock inte av ondo. Det vi har vunnit på detta är desto mer intressant.

Vi har inte bara eliminerat ett hårdvarufel och frigjort utrymme för migreringen från FreeBSD till Linux, vi har dessutom fått upp en riktigt bra struktur för vårt nya system och anpassat vår virtuella miljö för den (globala) migrering som är planerad där.

Under natten som gick utförde vi en migrering av Spiderman, från FreeBSD till Linux. Till skillnad från tidigare (oförberedda) migrering av Troubadix så hade vi förberett detta väldigt noggrant.

Till en början så har vi tagit fram ett särskilt verktyg som jämför inställningar, moduler, komponenter osv mellan originalservern (FreeBSD) och den virtuella servern (Linux). Och med jämför så menar jag verkligen jämför. Verktyget plockar fram exakt information om versioner, sökvägar, specialinställningar, ja rubbet.

Med i bagaget hade vi även vår erfarenhet från den tidigare migreringen av Troubadix, samt en gedigen (intern) wiki-artikel om hela processen (utförande och resultat).

Så, hur gick det då?

Innan vi påbörjade migreringen hade vi kört en rsync för att synkronisera all data mellan servrarna. Med jämförelseverktyget hade vi även anpassat Linux-servern i förväg. Eftersom vi kör Apache 2 i vår virtuella miljö (istället för Apache 1 som vi har på våra FreeBSD-servrar) så behövde vi anpassa konfigurationsfilen en aning (som skiljer sig åt mellan versionerna). Detsamma gällde även justeringar av vissa rättigheter.

Efter att den gamla servern hade stängts ned så tog vi upp den nya servern på ett identiskt IP-nummer (och slapp på så sätt fördröjningar pga DNS-uppdatering). Efter att migreringen hade utförts så synkroniserade vi all data mellan servrarna en sista gång. Samtliga tjänster kontrollerades och ett flertal hemsidor på servern besöktes även för att se så att allt fungerade bra.

Det blev en total nedtid, under själva migreringen, på ungefär 30 minuter.

Trots detta missade vi några saker.

Installatron följde inte med ordentligt, vissa schemalagda aktiviteter kom inte igång och när webbservern fick ett större antal processer (fler besökare) så uppstod det ett rättighetsproblem. Dessa saker åtgärdades dock så snart vi upptäckte dem.

Vid nästa migrering kommer vi att åtgärda detta under själva migreringen.

Vi valde att först migrera Spiderman, eftersom den servern har bråkat lite för mycket här under veckan. Nästa vecka kommer vi inleda med en migrering av VonAnka. Även detta kommer vi att informera ytterligare om på www.binerodrift.se.

Det har varit en händelserik helg på Binero. I lördags morse fick vi larm om att servern Troubadix låg nere. Efter att ha försökt få igång den på distans, utan resultat, begav jag mig ner till vår serverhall.

Där kontrollerades hårdvaran på den fysiska servern, samtidigt som en tidigare backup kördes över på en Linux-server i vår virtuella miljö. Efter ett tag kunde vi konstatera att det var en bra idé. Det var nämligen ett hårdvarufel (RAID-kortet) som hade orsakat kraschen av Troubadix.

Efter att backupen hade kopierats över till den virtuella Linux-servern kom merparten av tjänsterna på servern igång. Vi noterade att en del rättigheter inte stämde, samt att viss konfiguration på servern skiljde sig från tidigare, vilket även åtgärdades. Resten av lördagen och söndagen spenderades med finjusteringar av servern.

Under morgonen idag har vi fortsatt att justera felaktigheter som vi upptäckt och ni har rapporterat. Schemalagda aktiviteter (cronjobs) och vissa sökvägar håller på att ordnas, om ni hittar något som är fel med era tjänster på Troubadix så får ni gärna rapportera detta till oss på support@binero.se.

En sak som vi inte kunde kopiera över ordentligt från den tidigare FreeBSD-servern till den virtuella Linux-servern var FTP- och SSH-lösenorden. Vår säkerhetspolicy, med kryptering av samtliga lösenord, är helt enkelt för säker.

Om du har ett konto på Troubadix så behöver du sätta ett nytt FTP-lösenord. Det gör du enkelt genom vårt kundcenter, under “Ändra lösenord”.

Nu kanske inte det här var vad vi hade sett fram emot i helg, men händelsen har ändå fört något positivt med sig. Vi har nämligen lärt oss väldigt mycket från denna första skarpa migrering. Den sista versen för Troubadix kommer att bli det första stycket av vårt byte från FreeBSD till Linux.