FS Data

FS Data - webbhotell, domännamn, e-post, servrar

Extern driftstatussida lanserad

Idag har vi nöjet att få presentera en ny driftstatussida:

http://status.fsdata.se

Denna driftstatussida är externt placerad (utanför våra serverhallar) och tillgänglig även om så all vår tekniska utrustning i Helsingborg slutar fungera.

FS Data fixar ny driftstatussidaPå den nya driftstatussidan har vi även en historik över alla tidigare planerade och oplanerade avbrott hos oss, sedan vi införde en driftstatussida. Det är därmed möjligt att se alla avbrott från 2012 fram till idag.

Om ni sedan tidigare prenumererar på inlägg från vår driftstatussida via RSS, vilket vi rekommenderar, så får vi be er uppdatera era prenumerationer till vår nya adress. Vi kommer även att fortsätta lägga ut driftstatus på Facebook och Twitter vid behov.

Vi hoppas att denna nya driftstatussida kan vara till nytta för våra kunder. Vi kommer göra allt i vår makt för att uppdatera den så snabbt och bra som möjligt samt att hålla nere antalet inlägg där (erbjuda så stabila tjänster som möjligt).

Om ni har några frågor eller funderingar kring detta, lämna gärna en kommentar här nedan.

Redovisning av nätverksstörning/avbrott

Igår kväll råkade vi ut för ett längre avbrott i vårt nätverk, som påverkade tillgängligheten för samtliga tjänster hos oss. På grund av dess omfattning så vill vi här redovisa exakt vad som hände och vad vi gör för att undvika ett likadant avbrott igen.

FS Data har en redundant nätverksanslutning, med två separata förbindelser, via Telia. Denna anslutning hanteras av två väldigt kraftfulla routrar, anslutna till vår redundanta brandväggslösning (två separata maskiner likaså), som automatiskt fördelar trafik dem emellan utan några avbrott.

För en tid sedan började vi notera vissa återkommande och eskalerande nätverksstörningar, sk. packet loss, med de anslutningar som vi idag har i våra brandväggar. Vi utförde en genomgående felsökning, konsulterade vår brandväggsleverantör och beställde nya anslutningar, som ankom här denna vecka.

För att eliminera nätverksstörningarna, till dess att de nya brandväggsanslutningarna var installerade, så valde vi att temporärt lägga om nätverket enbart mot Telias primär anslutning/router. De nya anslutningarna för brandväggarna installeras nästa vecka och vi har inte haft något oplanerat avbrott eller anslutningsbyten hos Telia under två års tid.

Sedan gjorde ”Murphys lag” sig påmind.

Igår kl. 17:30 kopplade Telia oplanerat om trafiken från vår primära anslutning/router till vår sekundära motsvarighet. Detta orsakade avbrott i vårt nätverk och våra tekniker ingrep omedelbart. Kl. 17:39 kopplades trafiken tillbaka, vilket åter gav oss en förbindelse, men kl. 17:44 återgick vi ännu en gång till den sekundära anslutningen/routern med tillhörande avbrott.

Utan vidare information från Telia fick våra tekniker ”kämpa i mörkret”. De kopplade om våra anslutningar ett flertal gånger, med omkonfiguration (och omstarter) av brandväggarna därtill. Efter mycket intensivt arbete lyckades vi till slut få till det och kl. 19:10 var nätverksstörningen/avbrottet helt över.

Vi vill givetvis inte lägga all skuld för detta avbrott på Telia. Den temporära omläggningen av nätverket bidrog även till att återställningen tog längre tid än nödvändigt. Vi har nu vidtagit åtgärder så att en eventuell liknande, oplanerad, omkoppling av Telia kommer kunna återställas avsevärt snabbare.

De nya brandväggsanslutningarna är som sagt på plats hos oss och de kommer att installeras, i samarbete med externa konsulter från vår brandväggsleverantör, här redan nästa vecka. Därefter kommer ett avbrott som detta inte att kunna uppstå igen.

Vi får avslutningsvis be så hemskt mycket om ursäkt för denna nätverksstörning/avbrott. Utöver tidigare nämnda nya anslutningar så har vi sedan en längre tid tillbaka arbetat med att förstärka och ytterligare säkra hela vår nätverksmiljö. Under hösten kommer vi bl a att kunna hantera IPv6 och anslutningar från fler leverantörer än Telia.

Vi gör allt i vår makt för att leverera så snabba, säkra och stabila tjänster som möjligt till våra kunder. Vår målsättning är att uppnå 100 % tillgänglighet i vår nätverksmiljö och det är ett mål som vi arbetar oavbrutet mot.

Om ni har några frågor eller funderingar om detta, lämna då gärna en kommentar här nedan.

Planerat servicefönster, tisdag 4/9

Som vi har berättat tidigare här i vår blogg så har vi något som vi kallar för servicefönster på FS Data, den första tisdagen varje månad fr om kl. 23:00. Under vårt servicefönster utför vi planerade uppdateringar i vår servermiljö. Inför varje servicefönster lägger vi även ut information i förväg på vår driftstatussida.

Tisdagen den 4/9 kommer vi ha ytterligare ett servicefönster. Denna gång kommer vi dock att utföra en lite mer omfattande uppdatering, som berör tillgängligheten för samtliga tjänster hos oss, så vi vill därför berätta om det här i vår blogg.

Till nästa servicefönster planerar vi nämligen att installera en ny modul i vår huvudswitch (som ansluter våra serverhallar till Internet). Detta sker för att ytterligare uppgradera kapaciteten i våra externa förbindelser.

Installationen påbörjas strax efter kl. 23:00 och den kommer att pågå i 5-10 minuter. Under denna tid kommer inga tjänster hos oss att vara tillgängliga. Samtliga servrar kommer att fortsätta fungera (och vara uppkopplade) i vårt interna nätverk, men den externa förbindelsen kommer att vara helt bruten.

Vi har alltid ett flertal tekniker på plats under våra servicefönster, som snabbt kan vidta nödvändiga åtgärder vid behov. Ytterligare information om uppdateringarna i vårt nästa servicefönster följer inom kort på vår driftstatussida.

Driftinfo: omstart av MySQL-servrar

För lite mer än en månad sedan utförde vi en uppgradering av våra MySQL-servrar. Uppgraderingen gick väldigt bra, men vi har stött på ett beteende på servrarna som vi vill eliminera. Detta kommer sannolikt att bidra till förbättrad hastighet och prestanda.

Vi kommer därför att starta om MySQL-servrarna för våra webbhotellskunder, med en annan konfiguration. Omstarten kommer att ske nattetid, mellan tisdag-onsdag, denna vecka. Våra tekniker har sedan tidigare testat denna konfiguration och startat om servrar på detta sätt i vår labbmiljö.

Vi räknar med att omstarten inte tar mer än 5-10 minuter/server och vi har tekniker på plats vid behov. Kontakta gärna vår kundtjänst om ni har några frågor om detta.

Uppgradering av MySQL-servrar

Vi kommer att uppgradera MySQL-servrarna för våra webbhotellskunder i kväll/natt mellan 22:00 – 00:00. Uppgraderingen berör enbart Linux-kärnan på servrarna och MySQL-tjänsterna kommer inte att uppgraderas i samband med detta. Man behöver därmed inte oroa sig för några versionsskillnader i MySQL.

Vi har vidtagit åtgärder för att minimera störningar i samband med uppgraderingen, men vissa avbrott kommer ändå att uppstå. Uppgraderingen är ordentligt planerad och våra tekniker kommer att säkerställa servrarnas funktionalitet efter varje genomförd uppgradering.

Denna uppgradering är främst avsedd att ytterligare förbättra prestandan på våra MySQL-servrar. Om ni har några frågor om uppgraderingen, kontakta då gärna vår kundtjänst.