AWS-fel visade kunder falska räkningar på miljarder

Ett fel i AWS faktureringssystem gjorde att vissa kunder såg kostnadsuppskattningar för molntjänster på miljarder eller till och med biljoner dollar. De felaktiga siffrorna dök upp i Amazons AWS Billing and Cost Management Console den 17 juli.

Amazon pausade tillfälligt sina faktureringsuppskattningar efter att företaget upptäckt problemet. De visade beloppen skapade stor oro, men Amazon uppgav att AWS-tjänsterna fortsatte att fungera normalt.

Flera användare delade skärmdumpar av de falska kostnaderna på nätet. En uppskattning nådde nästan 495 miljarder dollar, trots att kunden bara hade betalat 1,63 dollar månaden innan.

Kunder fick panik över enorma AWS-räkningar

AWS-felet påverkade ett okänt antal kunder. I vissa fall steg uppskattningarna från vanliga månadskostnader till belopp som ingen privatperson eller verksamhet rimligen kunde vara skyldig.

En användare uppgav att kontot visade en räkning på nästan 495 miljarder dollar. En annan såg en uppskattning på omkring 1,5 biljoner dollar. Samtidigt fick en kund med ett vilande personligt AWS-konto en varning om en kostnad på över 26,5 miljoner dollar.

De oväntade varningarna skapade naturligtvis panik. Flera kunder trodde först att något allvarligt hade hänt med deras konton eller molnmiljöer.

AWS-kostnader kan snabbt förändras när kunder av misstag låter dyra resurser fortsätta att köra. Därför tar många användare varningar om höga kostnader på stort allvar och agerar direkt för att undvika fler utgifter.

Amazon pausade faktureringsuppskattningar

Amazon upptäckte problemet den 17 juli och bekräftade att vissa kunder fick förhöjda uppskattningar i AWS Billing and Cost Management Console.

Företaget pausade sedan de berörda faktureringsuppskattningarna för att stoppa fler felaktiga siffror. Ingenjörsteamet spårade problemet till konsolens system för faktureringsberäkningar.

Det räckte dock inte att identifiera felet. Amazon behövde flera timmar och mer än ett försök innan företaget helt hade löst AWS-felet.

Den 18 juli uppgav Amazon att konsolen åter fungerade korrekt.

AWS-tjänsterna fortsatte att fungera

Amazon uppgav att faktureringsproblemet inte störde den underliggande AWS-plattformen. Kunder kunde fortfarande komma åt och använda sina molntjänster medan företaget arbetade med lösningen.

Senare bad företaget om ursäkt för den oro som händelsen skapade. Amazon uppgav också att det ska genomföra en detaljerad granskning för att minska risken för liknande problem i framtiden.

Företaget tillade att det ska förbättra sina rutiner för faktureringsincidenter. Amazon avslöjade dock inte hur många konton som påverkades.

Företaget uppgav inte heller om det hade stängt av eller pausat några AWS-konton på grund av de felaktiga uppskattningarna.

Falska uppskattningar kan ändå skapa problem

De enorma räkningarna var inte verkliga, men AWS-felet kan ändå ha fått praktiska följder för vissa organisationer.

Ett företag som ser en oväntad kostnad kan omedelbart stänga av molnresurser, databaser, applikationer eller andra tjänster. Ett sådant beslut kan begränsa kostnaderna om avgiften är verklig. Samtidigt kan det orsaka webbplatsavbrott, störningar i verksamheten och förlorade intäkter.

Därför bör organisationer kontrollera ovanliga AWS-kostnader genom sin kostnads- och användningsdata innan de stänger av kritiska resurser. De bör också använda kostnadsvarningar, budgetkontroller och interna eskaleringsrutiner för att snabbt bedöma möjliga incidenter.

I det här fallet var beloppen uppenbart orealistiska. Ändå visar händelsen hur även ett tillfälligt faktureringsfel kan skapa stor oro bland molnkunder.