Back to overview
Downtime

Palvelukatko verkkokovalevyn ylikuormittumisesta

Oct 02 at 03:13pm EEST
Affected services
Storefront
Backend API
Checkout

Resolved
Oct 02 at 10:15pm EEST

Issue was resolved right after the incident.

Created
Oct 02 at 03:13pm EEST

AWS EFS -verkkolevyssä ilmeni häiriö 1.10.2010 aamulla, josta järjestelmäylläpitäjät havahtuivat välittömästi. He aloittivat korjaustoimet ennen kuin tilanne eskaloitui laajemmaksi, ja ennen kuin kauppiaat ilmoittivat ongelmasta.

Yritimme ensin hallitumpaa kiertoratkaisua, mutta sen epäonnistuttua jouduimme hetkellisesti estämään verkkoliikenteen ja vaihtamaan levyresurssin tyypin (burstable → elastic), jotta AWS:n resurssipolitiikat eivät pullonkauloittaisi suorituskykyä. Varsinainen korjaus valmistui alle tunnissa; merkitsimme tapauksen ratkaistuksi hieman myöhemmin, kun vakaus oli varmistettu.