25manna resultat – status efter tester i februari

Inför tester av mjukvara och hårdvara som planerats in under februari införskaffades nya databasservrar.

Prestanda och kapacitetstester upprepades på samma sätt som under tidigare test i november med den mjukvara, hårdvara och uppsättning av servrarna som användes vid 25manna 2013. Samma problem med svarstider som uppstod under tävlingen kvarstod.

Tester genomfördes med de nya servrarna, med samma mjukvara och uppsättning som vid 25manna 2013. Testerna kunde då genomföras utan prestandaproblem.

Slutsats:

Varför blev det problem med resultaten?
Problemen under 25manna 2013 orsakades av att en ny version av databasmotorn MySQL infördes för nära inpå tävlingsdagen, utan att nya prestandatester genomfördes.

Den nya versionen av MySQL använder betydligt mer arbetsminne än den gamla, varför servrarna överbelastades. Då alla servrar hade samma mjukvaruversioner och minneskonfiguration drabbade samma fel även backupservrarna.

Att nya prestandatester inte genomfördes berodde på en kombination av att ingen kunde föreställa sig att en MySQL-uppdatering skulle få så förödande konsekvenser och att ändringen infördes så nära inpå tävlingsdagen.

Var det Sportident och/eller OLA systemen som inte fungerade?
Nej, problemet orsakades varken av Sportident eller av OLA systemen.

Vad vidtas för åtgärder?
De servrar som användes vid 25manna 2013 skrotas.
Ingen ny mjukvara kommer att införas utan att kapacitetstest genomförs.

Hur kan man lära av det inträffade inför 25manna och andra tävlingar i framtiden?
Som ett led i arbetet med prestanda och kapacitetstester har testerna kompletterats för att ge en så komplett test av utrustning med tillhörande programvaror som möjligt.

Arbetet fortgår med att ta fram metoder etc. för att försöka förhindra att liknande händelser uppkommer framöver. Parallellt pågår arbete med att förbättra organisation och processer att använda om/när något motsvarande trots allt skulle inträffa igen.


Detta inlägg finns även på: Engelska, Finska
Uppdaterat: 2 december, 2014 kl. 20:15