Post mortem na de storing van zondag

Op zondag 21 september 2025 zorgde een technisch probleem in het centrale datacenter van Bitonic ervoor dat de website en app niet beschikbaar waren. Hierdoor konden wij onze klanten gedurende het grootste deel van de dag niet bedienen. Hoewel er tijdens deze zware verstoring nooit fondsen in gevaar zijn geweest, realiseren we ons dat de situatie een grote impact heeft gehad op onze klanten die gedurende de storing geen toegang hadden tot hun account.

Allereerst wil ik mijn oprechte excuses aanbieden voor het ongemak en de mogelijke zorgen die deze verstoring heeft veroorzaakt.

De storing begon op 21 september om 06.35 en de dienstverlening was voor alle klanten volledig hersteld op 21 september rond 20.00. Gedurende het incident bleven de beveiligingssystemen van Bitonic naar behoren functioneren. In de periode waarin klanten geen toegang hadden tot onze diensten, zijn ook het handelen en de opnames stopgezet.

Oorzaak en maatregelen

De oorzaak van de storing was het volledig uitvallen van één van onze storage platform nodes (een server in ons datacenter). Het storage platform ondersteunt de opslag voor het merendeel van onze diensten. Hoewel onze systemen zijn ontworpen om een storing zoals deze te weerstaan, leidde dit uiteindelijk tot het onbereikbaar zijn van het platform voor de diensten.

De op het storage platform opgeslagen gegevens worden verspreid en redundant opgeslagen. Dit voorkomt dataverlies, zelfs bij een catastrofaal uitvallen van een server. Het systeem is ontworpen om dit soort uitval probleemloos op te vangen.

Hoewel het systeem werkte zoals bedoeld en bezig was met herstel, legde het herstel extra druk op het storage platform, waardoor het een veiligheidslimiet bereikte en geen nieuwe activiteit toestond. Deze limiet zorgde ervoor dat het merendeel van onze diensten niet beschikbaar was.

Direct nadat het probleem zich voordeed, werden onze engineers ingezet om zowel op afstand als ter plaatse in ons datacenter onderzoek te doen. Het herstelproces nam helaas veel tijd in beslag voordat het volledig voltooid was en we alle systemen weer konden hervatten.

Lessen en preventie

Bij Bitonic zijn we er trots op dat we diensten aanbieden waarbij we nooit gegevens delen met of onderbrengen bij derde partijen. Bij het ontwerpen van onze producten stellen we zeer hoge eisen aan de privacy en veiligheid van klantgegevens. Dit betekent dat we onze eigen datacenters beheren en ons eigen hooggekwalificeerde medewerkers inzetten om deze diensten te onderhouden.

Echter, hoewel we in de afgelopen 13 jaar hebben bewezen ruim in staat te zijn om deze diensten te leveren, streven we naar een hoger niveau van stabiliteit en beschikbaarheid om de klanttevredenheid te waarborgen. Vanwege deze ambitie hebben we al meer dan een jaar geleden besloten onze datacenters die volledig onder eigen beheer staan te migreren naar gedeeltelijk beheerde datacenters. Dit stelt ons in staat om nog steeds complete controle te behouden over alle software en gegevens en tegelijkertijd te kunnen terugvallen op een professionele derde partij voor het beheer van onze hardwarebehoeften; dit omvat ook het storage platform dat centraal stond in dit incident.

De migratie naar het nieuwe datacenter is al in volle gang en we verwachten dat dit tegen het einde van dit jaar is afgerond.

Daarnaast werken we aan het vergroten van onze opslagcapaciteit om ruim binnen de veiligheidslimieten te blijven en hebben we de monitoring van het platform als geheel verhoogd, zowel in de huidige situatie als in de toekomst.

Conclusie

Zoals eerder gezegd, wil ik mijn excuses aanbieden voor dit incident en de zorgen die het bij onze klanten heeft veroorzaakt doordat er een tijd geen toegang tot de bitcoin en euro die wij beheren mogelijk was.

De systemen en procedures die we hebben, zijn in staat om dit soort problemen te weerstaan en we blijven er alles aan doen om uw data en fondsen veilig te houden. We zullen ervoor zorgen dat een verstoring van zo'n lange duur niet opnieuw voorkomt en het team zal zich volledig richten op het verbeteren van onze systemen om een soortgelijk incident in de toekomst te voorkomen.

Tot slot wil ik ons uitstekende technische team en onze trouwe klanten bedanken voor hun blijvende steun.

Niels van Groningen,
Algemeen directeur Bitonic B.V.