Kanadensiska telekom Rogers drabbades av ett stort avbrott som påverkade anslutningen till fasta telefoner, mobiltelefoner och Internet över hela Kanada som började tidigt i morse. Downdetector listade tusentals rapporter om problem som uppstod när folk började gå upp runt 5 på morgonen ET och inte kunde komma online.
Rogers tog först upp ajourneringen i en tweet från sitt officiella supportkonto strax före 09:00 ET och blev sedan tyst i flera timmar. på fredag eftermiddag twittrade företaget att dess tekniska team arbetar för att återställa tjänster “tillsammans med våra globala teknikpartners och gör framsteg”.
Sent på fredagskvällen publicerade Rogers vd och president Tony Staffieri ett brev till kanadensare på företagets hemsida.
Kära kanadensare,
Vi vet att du litar på att Rogers kopplar dig till nödtjänster, gör betalningar, servar dina kunder, kontaktar jobbet och håller kontakten med vänner och familj. Vi tar detta ansvar på största allvar och vi sviker dig idag. Vi kan och kommer att göra bättre.
Som ni vet upplevde vi ett nätverksavbrott i både trådlös och kabeltjänst som började tidigt i morse.
Vi har gjort betydande framsteg mot att få våra nätverk online igen, och många av våra trådlösa kunder börjar se tjänsten tillbaka. Vi har ännu ingen ETA på när våra nätverk kommer att vara helt återställda, men kommer att fortsätta att dela information med våra kunder när vi återställer full service.
Vi vet att att gå en hel dag utan anslutning har en verklig inverkan på våra kunder och alla kanadensare. På uppdrag av oss alla här på Rogers, Rogers for Business, Fido, chatr och cityfone vill jag uppriktigt be om ursäkt för detta serviceavbrott och den inverkan det har på människor från kust till kust.
Medan våra team fortsätter att arbeta för att lösa situationen vill jag göra två åtaganden till dig:
För det första arbetar vi för att helt förstå grundorsaken till detta avbrott och kommer att göra alla nödvändiga ändringar för att säkerställa att vi uppfyller och överträffar dina förväntningar på våra nätverk i framtiden.
För det andra kommer vi att göra det rätt för våra uppskattade kunder. Vi kommer proaktivt att kreditera alla våra kunder som drabbats av avbrottet och kommer att dela mer information snart.
Jag tar fullt ansvar för att se till att vi på Rogers förtjänar ditt fulla förtroende och återigen finns där för att koppla dig till det som är viktigt.
Till ditt förfogande,
Tony Staffieri
ordförande och VD
Det finns ännu ingen ETA för en fullständig återhämtning. i en annan tweet lovade företaget att det skulle “proaktivt kreditera alla kunder” och sa att det hade “alla tekniska resurser och partner” som arbetar för att återställa sitt nätverk.
CBC rapporterade på fredagskvällen att folk börjar se sina heminternet och trådlösa tjänster återvända, medan Cloudflare Radar-data visar att trafiken börjar flöda till och från Rogers nätverk igen, även om det fortfarande inte är i närheten av normala nivåer.
Data från Cloudflare, ett företag för innehållsleverans och DDoS-reducering som hjälper många webbplatser med hög trafik att hantera sin verksamhet, visar kommunikationen mellan dess belastningsdelningsnätverk och Rogers i Kanada som visar sitt normala nattmönster innan den sjönk till nära noll runt 3–4 på morgonen ET och att registrera en platt linje sedan dess. Samtidigt var det en enorm ökning i BGP-meddelanden (Border Gateway Protocol) för nätverket som indikerar routingändringar.
i ett blogginlägg som publicerades på fredagseftermiddagen spekulerade Cloudflares personal att avbrottet var resultatet av ett internt fel hos Rogers, snarare än en cyberattack eller annan orsak. De citerade detta mönster av BGP-meddelanden och noterade att eftersom Rogers nätverk nu misslyckas med att meddela sin närvaro, kan resten av Internet inte hitta det. BGP är en kärnteknik som hjälper till att flytta information från en plats på Internet till en annan, och ett problem med BGP-routinginformation var orsaken till ett massivt avbrott i Facebooks nätverk förra hösten.
OBS: Åtkomst till My Service Canada-konto med GCKey och användning av multifaktorautentisering via text eller röstmeddelande är tillfälligt otillgängligt på grund av ett internetavbrott i Kanada. Tack för ditt tålamod.
— Service Canada (@ServiceCanada_E) 8 juli 2022
Avbrottet är där också kopplat från Interacte-nätverket som kanadensiska banker använder, vilket inaktiverar betalkort, uttagsautomater och banköverföringstjänster som nyligen gjorde över 1 miljard transaktioner på ett år.
Passtjänster och kanadensiska inkomstskattemyndigheten är bland statliga tjänster som inte är tillgängliga idag på grund av avbrottet. Båda byråerna varnade också användare för att avbrottet bryter multifaktorautentiseringskoder som skickas via röst- eller textmeddelande, så att personer som har loggat ut kanske inte kan logga in just nu.
Till och med den kanadensiska radio- och telekommissionen (CRTC), som reglerar sändningar och telekommunikation, säger att hans telefoner är nere på grund av avbrottet.
NetBlocks verktyg för spårning av internetavbrott delade data i realtid, vilket indikerar att Kanadas nationella anslutningsmöjlighet har sjunkit till bara 75 procent av sina normala nivåer.
ℹ️ Uppdatering: Avbrottet av internet och telekommunikation i #Kanada fortsätter, med en fjärdedel av landets övervakade anslutningsmöjligheter för närvarande bortkopplad; statistik visar en stark inverkan på Rogers/Fido och ett antal mindre nätverksleverantörer pic.twitter.com/HbcoM7PRKB
— NetBlocks (@netblocks) 8 juli 2022
CBC News rapport noterade att Rogers dotterbolag Fido också kämpar. Artikeln sa att problemen påverkade kortbetalningshantering och bankomater över hela Kanada. En CBC-radiostation i Kitchener, Ontario är också offline och vissa telefontjänster för Ottawa Transit Agency är utslagna. Foton från Toronto visar människor som trängs i kaféer eller går till biblioteket för att få tillgång till Wi-Fi nu när deras andra alternativ är offline.
TekSavvy Customer Service berättade för kunderna att avbrottet sträcker sig till “ontario, quebec och östra provinser” utan någon ETA för lösning tills TGS rapporterar att Thunder Bay-operatören Tbaytel säger att Rogers-avbrottet är statligt.
Polisen i Toronto twittrade tidigt i morse efter att några människor i staden upplevde anslutningsproblem som ringde 911. “Rogers Network upplever vissa tekniska problem”, sa Toronto Police Operations Twitter-konto. “Vi jobbar på att lösa de här problemen.” uppföljning av tweetpolisen bekräftade att deras 911-central fungerar och rådde alla som behöver ringa att stanna på linjen om de kommer fram och försöka ringa igen om de inte gör det.
INTERAC:s elektroniska överföringstjänster är inte tillgängliga hos de flesta finansinstitut, vilket påverkar möjligheten att skicka och ta emot betalningar. Vi väntar på uppdateringar från Rogers om deras upplösning.
— INTERAC (@INTERAC) 8 juli 2022
Vissa kan ha problem med CRA-multifaktorautentisering på grund av tekniska problem med sin mobilleverantör. För att undvika att ditt konto inaktiveras, om du inte omedelbart får ditt engångslösenord under inloggningsprocessen, försök inte igen.
— Canada Revenue Agency (@CanRevAgency) 8 juli 2022
Uppdatering klockan 9:52 ET: Lade till information om Bank of Montreal
Uppdatering klockan 11:20 ET: Aktuellt avbrott noterat, tillagd information från Cloudflare Radar, TekSavvy och Tbaytel
Uppdatering klockan 11:33 ET: Lade till uttalande från Rogers
Uppdatering kl 12:40 ET: Lade till den senaste uppdateringen från NetBlocks
Uppdatering klockan 13:31 ET: Lade till ytterligare information om Interacs banknätverk, — tack mbarriault.
Uppdatering kl 14:13 ET: Lade till information om avbrott i CRTC, Passport Services och Tax Services.
Uppdatering klockan 15:39 ET: Lade till Cloudflares anteckningar om BGP som en möjlig orsak till avbrottet, såväl som Rogers uttalande att det “gör framsteg” med att åtgärda problemet.
Uppdatering klockan 23:47 ET: Lade till uttalande från Rogers VD och notera att tjänsterna kommer tillbaka online, långsamt.
https://www.theverge.com/2022/7/8/23199945/rogers-down-outage-internet-issues911-canada