Om 16.35 uur is door een storing aan de firewall van de router tix-db-ams-cr01.trans-ix.net een reload uitgevoerd van de router.
Het verkeer vanuit Databarn Amsterdam is daarom automatisch overgeschakeld naar de tix-db-ams-cr02.trans-ix.net. Omdat dit ongepland was heeft dit tot enkele seconden onderbreking gezorgd waardoor sessies verbroken kunnen zijn.

De firewall dient om de router te beschermen tegen verkeer gericht aan de management interface van de router. Door een toename in verkeer richting de router zelf, is de firewall module overbelast geraakt waardoor ook verkeer wat gerouteerd werd negatief beïnvloed is. Hierdoor is een reload uitgevoerd om de situatie snel te herstellen en een failover te forceren naar de tweede router in het datacentrum.

De firewall configuratie zal worden gewijzigd om herhaling te voorkomen.

Om ongeveer 19.30 uur is een storing opgetreden in het netwerk waardoor er 2gbit/s tussen de routers heen en weer werd verzonden.
Doordat dit de maximale bandbreedte is van een full duplex gigabit verbinding is de router in Gyrocenter om 19.45 uur onbereikbaar geworden.

Omdat echter de BGP connecties naar de primaire provider voor peering verkeer online bleef werd verkeer nog steeds geaccepteerd door de router die intern geen connectie meer had.
Om 20.00 uur is de BGP connectie uitgeschakeld en is direct automatisch overgeschakeld naar de tweede connectie in Databarn.

Momenteel analyseren wij de situatie om te bepalen hoe dit heeft kunnen ontstaan en of alles nu stabiel is/blijft.
Voor zover wij nu kunnen zien is het grootste deel van het internationale verkeer online gebleven gedurende de storing.

Rond 0.00 uur is de primaire router op Databarn overbelast geraakt en onbereikbaar geworden.
Het verkeer wordt momenteel omgeleid via de secundaire router en de nieuwe router op Gyrocenter DC-2.

Door nog onbekende oorzaak is echter een van de oudere core switches onbereikbaar geworden op hetzelfde moment waardoor diverse klant netwerken onbereikbaar zijn.
Netwerken achter de firewalls en de nieuwe core switches zijn normaal bereikbaar.

Een engineer is onderweg naar het datacentrum en zal binnen enkele momenten de storingen oppakken.

De core router van We-Dare bij SARA Amsterdam vertoond problemen en zal een reload krijgen op 1 juli om 02.00 uur.

Een belangrijk deel van het verkeer van en naar de netwerken van Trans-IX lopen ook via de apparatuur van We-Dare bij SARA Amsterdam.

Het onderhoud zal van 2.00 uur tot 2.30 uur worden uitgevoerd en de reload zal een verwachtte downtime opleveren van +/- 1 minuut.