Van handmatig beheer naar 220 nodes die zichzelf herstellen.
Downtime kost direct omzet. We bouwden een systeem dat storingen zelf oplost, vaak nog voordat iemand het merkt.
De uitdaging
Met honderden nodes tegelijk in de lucht houden wordt elke storing een race tegen de klok. En bij blockchain-nodes tikt elke minuut downtime direct door in gemiste verdiensten: de uptime van een node bepaalt rechtstreeks wat die node opbrengt.
Wat we bouwden
Een volledig geautomatiseerd beheersysteem op de Linux-servers. Valt een node uit, dan volgt eerst een automatische herstart. Lukt dat niet, dan bouwt het systeem de node volledig opnieuw op, zonder handmatig ingrijpen. Pas als dat geautomatiseerde herstel faalt, gaat er een melding naar de beheerders.
Wat het systeem doet
In de praktijk
We hielden 220 nodes volledig geautomatiseerd in de lucht, drie jaar lang fully managed. Storingen werden zelfstandig opgelost, vaak nog voordat iemand ze opmerkte. En omdat de uptime van elke node direct de verdiensten bepaalde, beschermde elke seconde die we online hielden rechtstreeks de omzet.