Awaria Teraswitch: Solana blisko zatrzymania sieci

Awaria trasowania w infrastrukturze Teraswitch wyłączyła w ciągu kilku minut 28,83% całego stakowanego SOL, a platforma Marinade Finance odtworzyła zdarzenie i ustaliła, że sieć osiągnęła 86% dystansu do progu 33,34% zatrzymania. Pełne przywrócenie połączeń zajęło 33 minuty, a w tym czasie około 90 walidatorów przestało działać.

Błąd zaczął się od uszkodzonej trasy wychodzącej z placówki Teraswitch w Miami, która potem rozprzestrzeniła się przez wewnętrzny przekaźnik w Amsterdamie. W rezultacie dwanaście lokalizacji od Londynu po Tokio straciło łączność z siecią. Teraswitch wykrył problem w około 10 minut, a naprawa połączeń trwała 33 minuty. Marinade wskazało, że w szczytowym momencie około 20 mln SOL online dzieliło sieć od zamrożenia.

Analiza Marinade wykazała koncentrację ruchu sieciowego: numer systemu autonomicznego AS20326 hostuje 27,34% całego stakowanego SOL, a podczas awarii 94% tej puli zniknęło z sieci. Program Delegacji Fundacji Solana (SFDP) formalnie ogranicza udział jednego ASN do 25%, limit został jednak przekroczony. Dodatkowo w tych samych minutach około 14 mln SOL przestało być widoczne u innych dostawców, co sugeruje wspólne punkty awarii nieobjęte etykietowaniem dostawców.

Systemy zapasowe u wielu walidatorów nie zadziałały. Spośród 74 walidatorów mierzonych przez Marinade tylko trzech przełączyło się na drugi serwer; większość pozostała offline aż do zakończenia awarii. Drugi największy walidator, Helius, był nieaktywny przez całe 33 minuty. Marinade przekazało, że jego dane pokazują podobną koncentrację delegacji: cztery ASN-y odpowiadają za dwie trzecie całej delegacji. Platforma zapowiedziała wprowadzenie ostrzejszych limitów na ASN i centra danych oraz publikację listy walidatorów z mechanizmami automatycznego przełączenia awaryjnego.

Skutki dla uczestników sieci ograniczyły się do utraconych nagród: około 90 walidatorów straciło łącznie 333 SOL, co przy bieżącej cenie odpowiada około 25 600 USD; straty mają zostać pokryte przez obligacje walidatorów na koniec epoki. Żadne środki użytkowników nie były zagrożone według dostępnych danych. Cena tokena SOL oscylowała wokół 76,46 USD, rosnąc o około 0,6% w ciągu dnia.

Historia sieci pokazuje wcześniejsze przerwy: w listopadzie 2022 roku awaria u innego dostawcy wyłączyła około 1 000 walidatorów i podniosła udział nieaktywnych stawek powyżej 20%. Pełne zatrzymanie sieci miało miejsce w lutym 2024 roku i trwało około pięciu godzin; w przypadku zatrzymania obligacje walidatorów nie pokrywają strat użytkowników, a zatrzymanie zamraża udziały wszystkich posiadaczy SOL jednocześnie.

Walidatorzy planują aktualizację finalności o nazwie Alpenglow, przewidzianą na październik, której celem jest przyspieszenie potwierdzania transakcji. „Solana zbliżyła się do 86% dystansu do zatrzymania tego ranka i prawie nikt tego nie zauważył” — przekazało Marinade Finance.