Facebook se izvinjava zbog prekida… Još jedan veliki prekid u više usluga je popravljen
Veliki društveni mediji i dalje su u velikim problemima: Instagram, WhatsApp, Facebook i Facebook Messenger u ponedeljak su doživeli rasprostranjene prekide, a mnogi korisnici širom sveta nisu mogli da koriste neke od najpopularnijih veb lokacija.
Iako ovo nije nečuveno, dužina prekida, koji je u vreme pisanja ovog teksta iznosio više od šest sati, veoma je retka – ali se konačno vratila na mrežu nakon dužeg prekida.
Šuška se da je ceo ovaj događaj uzrokovan rutinskim ažuriranjem servera, a Facebook je od tada ažurirao svoju inženjersku stranicu sa više informacija koje sugerišu da bi to mogao biti slučaj:
“Svim ljudima i preduzećima širom sveta koji zavise od nas, žao nam je zbog neugodnosti uzrokovanih današnjim ispadom na našim platformama. Radili smo koliko smo mogli da obnovimo pristup, a naši sistemi su sada podignuti i rade.
„Osnovni uzrok ovog prekida je takođe uticao na mnoge interne alate i sisteme koje koristimo u svakodnevnom radu, komplikujući naše pokušaje da brzo dijagnostikujemo i rešimo problem.
Facebook se izvinjava – “Naši inženjerski timovi saznali su da su promene konfiguracije na okosnicama usmerivača koji koordiniraju mrežni promet između naših centara podataka uzrokovale probleme koji su prekinuli ovu komunikaciju. Ovaj poremećaj mrežnog prometa imao je kaskadni učinak na način komunikacije naših centara podataka, dovodeći naše usluge do zastoja.
“Naše usluge su sada ponovo na mreži i aktivno radimo na tome da ih u potpunosti vratimo u redovno poslovanje. Želimo da razjasnimo u ovom trenutku verujemo da je osnovni uzrok ovog prekida pogrešna promena konfiguracije. Takođe nemamo dokaze da su korisnički podaci kompromitovani kao rezultat ovog zastoja.
“Ljudi i preduzeća širom sveta svakodnevno se oslanjaju na nas da bi ostali povezani. Shvatamo uticaj ovakvih zastoja na živote ljudi i našu odgovornost da obaveštavamo ljude o prekidima u našim uslugama. Izvinjavamo se svima onima na koje to utiče, i radimo na boljem razumevanju onoga što se danas dogodilo kako bismo mogli da nastavimo da poboljšavamo našu infrastrukturu. “
Facebook, whatsapp, messenger i instagram offline više od 6 sati!
Prekid je počeo sa redakcijom kompanije i proširio se na celu veb lokaciju i društvenu mrežu. Ali Instagram i druge usluge ostale su u nekim oblastima još duže nedostupne, što nas navodi na zaključak da se usluge nastavljaju po regionima.
DownDetector – veb lokacija koja prati nestanke mrežnih usluga – pokazala je da se sve usluge bore na mnogim teritorijama. Bilo je i izveštaja da usluge sa nalozima povezanim sa Facebook prijavljivanjem, poput Airbnb-a i Strave, ne rade.
Nije bilo načina da se izbegnu problemi, pa su korisnici morali da sačekaju da se reše da se ponovo povežu sa WhatsApp-om, Instagramom ili Facebookom.
Facebook stranice su se na kraju počele vraćati na mrežu nakon višesatnog prekida, sa zvaničnim tvitovima sa Instagrama, WhatsAppa i drugih servisa koji tvrde da se vraćaju na mrežu.
Ubrzo nakon početka prekida, Facebook-ov izvršni direktor za komunikacije, Andi Stone, prvi je podelio ažuriranje na Tvitter-u, rekavši da je kompanija svesna problema i da trenutno radi na rešavanju problema, a zatim i WhatsApp-ov Twitter nalog.
Ubrzo nakon toga, zvanični Facebook nalog priznao je da korisnici imaju problema sa pristupom aplikacijama i proizvodima kompanije. Glavni tehnički direktor Facebooka Mike Schroepfer tvitovao je izvinjenje četiri sata nakon prekida, a nakon šest sati kompanija je poslala još jedan tvit u kojem se izvinjava dok se njegove usluge ponovo pojavljuju na mreži.
Problem je uticao i na druge Facebook proizvode: korisnici su prijavili probleme sa kompanijama Oculus uslugama virtuelne stvarnosti.
Istaknuta rudarica podataka na Facebook-u i Tvitter-u Jane Manchun Wong upozorila je korisnike putem tvita da ne restartuju svoje Oculus uređaje tokom prekida kako ne bi izgubili igre. Dizajner VR igara i softvera Julien Dorra tvitovao je video zapis o tome kako je to učitati Oculus usred prekida:
A prekid je mogao uticati i na stvarnu infrastrukturu Facebooka: prema tvitu reporterke New York Times-a Sheere Frenkel, zaposlenica Facebooka navodno ne može ni ući u zgrade kompanije zbog neispravnih znački.
Drugi izveštaj NIT-a tvrdi da su se zaposleni borili da telefoniraju sa telefona izdatih na poslu ili primaju e-poštu izvan kompanije.
Prekidi na Facebooku: šta se dogodilo?
Nijedan od naloga na Facebooku, Whatsapp-u ili Instagramu nije objasnio šta je izvorno izazvalo prekid, što je dovelo do spekulacija i analiza. U ovom trenutku većina se slaže da ovo nije hakovanje ili usmereni napad na infrastrukturu Facebooka, a izvori su rekli New York Times-u da verovatno nije u pitanju cyber napad jer „malo je verovatno da će jedno hakovanje uticati na toliko aplikacija odjednom.’
Umesto toga, dokazi pokazuju da su mrežni putevi kompanije do spoljnog veba jednostavno nestali bez objašnjenja.
Bryan Krebs iz firme za sajber bezbednost Krebs on Security tvitovao je svoj zaključak da je sistem imena domena (DNS) koji beleži usmeravanje saobraćaja na Facebook lokacije i usluge jednostavno povučen – kao što je već rečeno, nestao sa veba – jutros:
Druge mrežne kompanije su primetile i teoretizovale da je problem sa BGP rutama, uključujući i Cloudflare SVP Danea Knechta, koji je na Twitteru napisao da je Facebook DNS i druge usluge u prekidu i da su ‘njihove BGP rute povučene sa interneta’.
Napomenuo je da je Cloudflare takođe video svoje greške, ali je naknadni tvit sugerisao da se oporavlja. Odvojeno, glavni direktor kompanije Cloudflare John Graham-Cumming tvitovao je videći Facebook-ove BGP promene tokom njihovog pojavljivanja i sugerisao da se uglavnom radi o povlačenju BGP rute. PJ Norris, glavni sistemski inženjer kompanije Tripwire, poslao je sledeću analizu TechRadaru u vezi sa ispadom:
“Oko 15.40 UTC u ponedeljak, 4. oktobra, izvršena je izmena BGP – Border Gateway Protocol-a. BGP je tehnologija koja ISP-om deli informacije o tome koji su provajderi odgovorni za usmeravanje internetskog saobraćaja na koje određene grupe Internet adresa.
„Drugim rečima, Facebook je nenamerno uklonio mogućnost da svetu kaže gde živi.
“Podrška promeni nije bila laka, budući da Facebook koristi vlastite usluge kućne komunikacije i e-pošte na koje je uticao prekid.
S obzirom da su ljudi radili na daljinu tokom pandemije, to je bio veliki problem.
„Oni koji su bili na licu mesta u data centrima i kancelarijama i pokušavali da odbiju promenu, nisu mogli da pristupe okruženju jer je sistem za kontrolu pristupa vratima bio u kvaru zbog uticaja prekida.
“Dakle, uvek se svodi na pitanje” da li se ovo moglo izbeći? ” Očigledno je u ovoj ranoj fazi da je Facebook imao jednu tačku greške koja je dovela do značajnog i skupog prekida za tehnološkog giganta. “
BGP je veliki (globalni) problem
Dok je DNS numerička adresa veb lokacije na Internetu (što je prevedeno sa „www._.com“ koje upisujete u traku za pretragu), BGP rute su putevi kojima zahtevi idu preko servera i računara da bi došli do odredišta. Kada su navodno Facebook-ove BGP rute povučene sa interneta, veb lokacije povezane sa tim rutama (poput Cloudflare) videle su da se urušavaju, a Facebook lokacije i usluge postaju nedostupne.
Teoretizovanje interneta na r/sysadmin subreddit sugerisalo je da se jutros dogodila promena konfiguracije koja je dovela do pada BGP ruta, što je Facebook odseklo od daljinskih izmena – od sada je samo fizički pristup mogao da popravi štetu (naglašeno u snimak ekrana korisnika Twitter-a Andree Toonk).
Pomenuti izveštaj New York Times-a podržava ovu teoriju, pozivajući se na navodni interni Facebook dopis da je mali tim zaposlenih poslat u Santa Clara, CA data centar, da ručno resetuje servere kompanije.
Neposredno pre nego što su se Facebook usluge počele vraćati na mrežu, Krebs je citirao izvor navodeći da je do prekida došlo zbog neispravnog BGP ažuriranja koje je blokiralo udaljene korisnike da ponište promene dok blokiraju lokalni pristup:
“Prekidi se povećavaju i često mogu ukazivati na sajber napad, ali to može dodati dodatnu zabunu kada dijagnostikujemo uzroke”, rekao je Jake More, stručnjak za sajber bezbednost i antivirusnu kompaniju ESET. “Kao što smo videli sa Fastly-om leti, zatamnjenja na vebu češće potiču od neotkrivene programske greške ili čak ljudske greške.”
U martu i aprilu 2021. godine došlo je do sličnog velikog prekida u kojem je svaka od Facebook usluga uticala – Facebook, Instagram, WhatsApp i Facebook Messenger – svaki put bila u prekidu više od pola sata. Ali s obzirom na to koliko su brzo ta pitanja rešena, čini se da je poslednji prekid katastrofa mnogo većih razmera. Do ovih poslednjih prekida došlo je zbog greške u sistemu naziva domena (DNS) ovih usluga, ali naizgled nije tako ozbiljno kao problem BGP.