Een routeringsstoring bij Teraswitch nam op donderdag 28,83% van de gestakede SOL offline, waardoor Solana op 4,51 procentpunt van de drempel voor een finaliteitsstop kwam. Onder het proof-of-stake consensusmechanisme van Solana is voor finaliteit vereist dat meer dan twee derde van de stake actief deelneemt; het verlies van een derde of meer zou voorkomen dat het netwerk blokken kan finaliseren. Ongeveer 90 validators in Europa en Azië werden getroffen, waarbij meer dan 133 miljoen SOL tijdelijk offline raakte. De getroffen validators verloren naar schatting 333 SOL aan beloningen, wat Marinade Finance ertoe bracht aan te kondigen de concentratierisico's van ASN's en datacenters te zullen herzien.

Het verkeer keerde terug om 04:16:15 UTC, volgens Marinade Finance.

Teraswitch-routeringsstoring trof meerdere locaties

Volgens Marinade adverteerde Teraswitch een standaardroute vanaf zijn locatie in Miami zonder de juiste route-attributen. Een route-reflector in Amsterdam gaf die route vervolgens door aan locaties in Europa en Azië. Edge-routers behandelden de route als lokaal en gaven er de voorkeur aan boven de geldige standaardroute.

De kern van Teraswitch wees de route echter af als ongeldig, waardoor 12 locaties zonder een bruikbaar pad achterbleven. De getroffen locaties omvatten Londen, Amsterdam, Dublin, Frankfurt, Singapore en Tokio. Noord-Amerikaanse locaties ondervonden niet hetzelfde probleem, aldus Marinade.

Teraswitch identificeerde het probleem binnen 10 minuten. Het verkeer keerde terug om 04:16:15 UTC, terwijl Miami tijdens verdere controles losgekoppeld bleef van het backbone-netwerk.

Meer dan 133 miljoen SOL ging offline

Marinade trof 118,89 miljoen SOL aan op AS20326, gelijk aan 27,34% van de totale netwerk-stake. Ongeveer 94% van die stake ging offline tijdens het incident. Nog eens 14,1 miljoen SOL ging offline bij Latitude.sh, Limestone, Butterfly Research en Allnodes.

Marinade kon niet vaststellen of deze storingen een gemeenschappelijke afhankelijkheid deelden. Negenenvijftig validators met 80,2 miljoen SOL keerden terug binnen hetzelfde korte herstelvenster. Marinade merkte op dat de validators niet automatisch overschakelden (failover) voordat de routering was hersteld — een signaal dat automatische failover-mechanismen ofwel niet geconfigureerd waren of niet werden geactiveerd onder deze omstandigheden.

Validators verloren 333 SOL aan beloningen

Helius, de op een na grootste validator van Solana, bleef de volledige 33 minuten offline. Van de 74 validators die Marinade mat, herstelden Laine, Cogent Crypto, SOL Strategies en Lion3d probleemloos.

Marinade rapporteerde dat vier ASN's twee derde van hun toegewezen stake bezitten, waarbij AS395201 alleen al goed is voor 36,94%. De 90 getroffen validators verloren ongeveer 333 SOL aan beloningen, die aan het einde van de epoch werden gedekt door validator-bonds.

De concentratiecijfers onderstrepen een terugkerende zorg in proof-of-stake netwerken: hoewel stake over veel validators kan worden verdeeld, kan de onderliggende infrastructuur nog steeds clusteren rond een klein aantal hostingproviders en datacenters, wat gecorreleerde faalrisico's creëert die nominale validator-aantallen kunnen maskeren.

Marinade is van plan de concentratielimieten per ASN en datacenter te herzien. Het protocol is ook van plan informatie te publiceren over de vraag of validators hot-swap en automatische failover-systemen gebruiken.