Onlangs schreven we waar de eigenaren van Ajax-hubs mee te maken kregen problemen – hubs zagen andere apparaten niet, er waren problemen met autorisatie in applicaties en met in- en uitschakelen. Het probleem werd snel opgelost en het bedrijf vertelde wat er toen gebeurde.
De problemen werden veroorzaakt door een servercrash, waardoor er problemen ontstonden in het systeem en het team Ajax-systemen dank aan de gebruikers voor hun geduld terwijl de specialisten dit probleem hebben opgelost.
“Na een grondig onderzoek van het incident bleek uit de analyse dat er geen duidelijke redenen voor de crash waren in onze gebeurtenislogboeken en statistieken. Deze situatie zorgde voor een groot probleem bij het vaststellen van de hoofdoorzaak, aldus de persdienst Ajax-systemen. "De servicedaling werd veroorzaakt door het uitvallen van een van onze servers, en ons load-balancing-systeem kon dit niet onmiddellijk verwerken."
Het bedrijf zei dat de eerste berichten over de vertraging bij het inschakelen/uitschakelen om 18 uur binnenkwamen en dat specialisten een ander servercluster begonnen in te zetten. Om 08 uur was het mogelijk om de werking van systemen en applicaties gedeeltelijk te herstellen, maar de abnormale belasting van de database verhinderde de volledige inzet van de serverclusters meerdere keren per 18 minuten. Een derde implementatiepoging om 45:30 uur herstelde de normale communicatie voor alle Ajax-applicaties en hubs volledig.
"Om de voortdurende betrouwbaarheid van onze diensten te garanderen, houden we actief rekening met verschillende hypothesen, waaronder de mogelijkheid van onjuist geheugengebruik, fatale fouten in de Linux-kernel of niet-traceerbare problemen in Amazon Web Services (AWS), - zegt de persdienst van het bedrijf. "Onze beste cybersecurity-ingenieurs werken in deze richtingen."
Het bedrijf verzekert ook dat de Ajax-functionaliteit niet uitsluitend beperkt is tot clouddiensten, en dat alle offline tools beschikbaar zijn, ongeacht de cloud. Een directe verbinding met een gecentraliseerde meldkamer, directe sms-/telefoonoproepen en het gebruik van SpaceControl en KeyPad om het systeem in en uit te schakelen werken bijvoorbeeld allemaal zonder dat er een cloudverbinding nodig is.
Ajax werkt ook aan een beleid voor noodberichten, problemen en andere soortgelijke situaties om gebruikers tijdig op de hoogte te houden van de huidige status. Het bedrijf hoopt echter dat dit beleid niet van pas zal komen. De persdienst voegde er ook aan toe dat teams van specialisten zorgvuldig werken om mogelijke probleempunten te vinden en de nodige verbeteringen door te voeren.
Lees ook: