16.6.2026 kello 12:03: Upcloudin palvelinsalissa havaittiin Ajas-järjestelmästä riippumaton yhteysongelma, joka esti suurelta osalta käyttäjiä järjestelmien normaalin toiminnan.
- Lokien perusteella osa käyttäjistä pystyi käyttämään järjestelmää myös häiriön aikana, mikä viittasi siihen, että kyseessä on verkko- tai nimipalveluihin liittyvä häiriö.
- Palveluntarjoajan häiriötiedotus ei ollut normaalisti saatavilla.
- Ongelma ei liittynyt millään tavalla Ajas-päivitykseen, joka oli tarkoitus julkaista tänään. Päätimme katkoksen johdosta lykätä päivitystä alustavasti huomiselle 17.6.2026, sekaannusten välttämiseksi.
- Selvitimme aluksi myös, liittyikö tilanne samaan aikaan havaittuihin laajempiin verkkohäiriöihin.
Kello 12:29: Suurin osa yhteyksistä on palautunut käyttöön ja pääsimme itse taas normaalisti palveluihin.
Kello 12:36: Kaikkien järjestelmien todettiin toimivan normaalisti.
Kello 13:18: Jälkiselvitys. Ongelman syyksi osoittautui palvelinsalin DNS-ongelma, eli palvelinsalissa olevat järjestelmät eivät saaneet haettua tarvittavia IP-osoitetietoja. Ongelma oli siinä mielessä poikkeuksellinen, että se vaikutti myös palvelinsalin omaan toimintaprosessiin ongelman korjaamiseksi sekä ongelmasta tiedottamiseen.
Olemme jo edellisen katkoksen jälkeen tehneet merkittäviä toimenpiteitä DNS-ongelmien sietokyvyn parantamiseksi. Lisäksi 17.6.2026 julkaistavaksi siirrettyyn Ajas-päivitykseen sisältyy uusia parannuksia, joiden arvioimme vähentävän tämänkaltaisten häiriötilanteiden vaikutuksia palveluihimme.
Tämän tapauksen perusteella jatkamme vielä vastaavien häiriöskenaarioiden tutkimista simulaatioiden avulla ja toteutamme havaintojen perusteella tarvittavat jatkotoimenpiteet palveluiden vikasietoisuuden parantamiseksi.
