Google Cloud-ի Լոնդոնի խափանումը PLC-ի սխալ կարգավորման պատճառով

Google Cloud-ը ասաց, որ հոկտեմբերի 20-ին Լոնդոնի europe-west-2-b հասանելիության գոտու խափանումը տեղի է ունեցել, քանի որ սխալ կարգավորումը խափանել է արտակարգ գեներատորների մեկնարկը էլեկտրամատակարարման խափանումից հետո։ Խափանումը ազդել է Lloyds-ի, HSBC-ի, Royal Mail-ի և Revolut-ի ծառայությունների վրա։ Google-ը հետագայում վերածրագրավորել է տուժած վերահսկիչը և փոխել է կայանի էլեկտրական համակարգը։

Ինչ է խափանվել

Կայանը օգտագործում է 2N էլեկտրամատակարարման ճարտարապետություն՝ յուրաքանչյուր կարևոր բեռի համար լիովին կրկնօրինակված էներգամատակարարման ուղիներով, որոնք աջակցվում են կենտրոնական բարձր լարման գեներատորային բանկով՝ կառավարվող կրկնակի պահուստային ծրագրավորվող տրամաբանական վերահսկիչով (PLC)։ Այն էլեկտրաէներգիա է ստանում երկու անկախ ցանցային մատակարարումներից՝ A և B անուններով, ինչպես նաև պահուստային ցանցային միացումից, որը կարգավորված է ձեռքով՝ ամբողջ տարածքի փոխանցման համար սպասարկման կամ արտակարգ իրավիճակների ժամանակ։

Google-ը ասաց, որ հիմնական պատճառը եղել է կայանին էլեկտրաէներգիա բերող արտաքին ստորգետնյա մալուխի խափանումը։ Այդ մալուխը միացված է A հիմնական մատակարարմանը և կոտրվել է, երբ B մատակարարումը չէր աշխատում, քանի որ B մատակարարման անջատիչը ֆիզիկապես բացվել էր շտկող նորոգման համար՝ 2026 թվականի հոկտեմբերի 14-ին եռամսյակային գեներատորային բեռնվածության փորձարկման ժամանակ բացահայտված խնդիրներից հետո։ Արդյունքում A հիմնական ցանցային մատակարարումը սպասարկում էր ընդհանուր կարևոր բեռը, իսկ B մատակարարման անջատիչը մնաց բաց։

Ինչու գեներատորները չեն մեկնարկել

Կայանը օգտագործում է անխափան էլեկտրամատակարարման աղբյուրներ (UPS), որոնք, Google-ի խոսքով, կարող են համակարգերը աշխատեցնել հինգ րոպե, եթե հասանելիության գոտին կորցնի ցանցային միացումը։ UPS-ները աշխատեցին, սակայն լարման զգայման նախագծային թերությունը և PLC-ի սխալ կարգավորումը խափանեցին գեներատորային կայանի ավտոմատ մեկնարկի ազդանշանի ստացումը։ PLC-ի տրամաբանությունը ցույց տվեց, որ առողջ ցանցային աղբյուր հասանելի է, թեև հիմնական և երկրորդային բաշխման մատակարարումները անջատված էին էլեկտրաէներգիայից, ուստի այն մեկնարկի հրաման չտվեց։ Այնուհետև UPS-ները սպառեցին էներգիան, իսկ գեներատորները մնացին անջատված։

Փոփոխություններ միջադեպից հետո

Էլեկտրամատակարարման ցանցին վերամիանալուց հետո Google-ը վերածրագրավորել է PLC-ն՝ սխալը չկրկնելու համար։ Ընկերությունը այդ ժամանակվանից բազմաթիվ փոփոխություններ է կատարել europe-west-2-b-ի էլեկտրական համակարգում և ասում է, որ փորձարկել է դրանք և բոլորը աշխատում են։

Google-ը նաև նշել է երկու գործողություն՝ հաղորդակցության բարելավում՝ ծանուցման արագությունը ուժեղացնելու համար՝ մշակելով ավտոմատ ահազանգ-հաղորդակցություն մեխանիզմ տեղանքին ազդող միջադեպերի համար, և ջանք՝ ընդլայնելու հարթակի մասշտաբով փորձարկման արդյունքները ենթակառուցվածքային մակարդակի իրադարձությունների համար։

Աղբյուրներ՝ The Register