LØST- FtPB opplever drifts-utfordringer i Azure
- Tor Oskar Ova Johnsen
Vi vurderer driftsutfordringene for å være løst. Rotårsaken var strømproblemer hos Azure.
Vi har kjørt gjennom alle feilede innsendinger. Fortsetter å følge med situasjonen.
Tjenestene ser ut til å kjøre som vanlig igjen. Vi har slått på kø behandling igjen og jobber nå med manuell behandling av innsendinger som feilet.
Ta kontakt på Service Desk med spørsmål eller om man opplever feilsituasjoner
Vi har valgt å slå av all behandling av Altinn innsendinger. De blir nå lagt i kø for senere behandling. Det er nå bare Ansako tjenester som kjører
Oppdateringer
Oppdatering kl. 12:21: Azure rapporterer flere warnings fra Norway East regionen der våre tjenester kjører. Varslene stemmer overens med de problemene vi ser. Vi antar driftsituasjonen nå er avhengig av at Azure løser sine problemer. Vi tror ikke vi har mistet noe data fra Altinn innsendinger, men vi har oppryddingsarbeid med å kjøre feilede innsendinger på nytt når systemet er oppe igjen. Det ser ut som om problemet inntraff ca. kl 11:10 så status API vill ikke nødvendigvis ha informasjon om innsendinger etter dette tidspunktet hvis de ikke kom seg inn i backend behandling.
Oppdatering kl. 12:53: De fleste tjenestene ser ut til å komme seg på beina igjen. Akkurat nå er det bare Saksbehandlingsdata API som ikke ikke har intern kommunikasjon med database i Azure. Vi avventer fremdeles situasjonen og har ikke slått på kø behandling ennå.
Oppdatering kl. 12:58: Det er 93 innsendinger/distribusjoner som feilet i systemet før vi slo av behandling. Disse kjøres manuelt så snart systemet er oppe igjen. Det ligger nå ca 160 innsendinger/dsistribusjoner i kø fra Altinn2 og Altinn3 som blir kjørt når vi slår på behandling igjen.
Opprinnelig informasjon
Flere at systemene i Azure gir oss nå alarmer.
Arbeidsflyttjenesten corefunctions har hatt noen problemer med å sende ut til SvarUt og noen sjekkliste tjenester er nede.
Vi ser problemer med disse tjenestene:
Saksbehandlingsdata API
Sjekklisten til Arbeidstilsynet
Trappesjekk
FtPB cache tjeneste for Sentral Godkjenning
Arbeidsflyttjenesten corefunctions ser ut til å fungere igjen, vi har en del etterarbeid å gjøre for å sende igjennom oppløyde innsendinger
Vi ser også at andre leverandører i økosystemet har problemer (fiks-io, Digital postkasse). Kan være et mer omfattende problem i Azure.
Tjenester som bruker corefunctions:
ferdigattest
supplering
Arbeidstilsynets samtykke
Varsel om oppstart av reguleringsplanarbeid