Driftudmeldinger

Udfald på tilgængelighed af Image Backups, Cloud Connect og Microsoft 365 Backup Nedbrud Løst

Start: 5 days ago 5 days ago
Beskrivelse af udmelding

Vi oplever i øjeblikket udfald på tilgængeligheden af følgende løsninger og services:

Image Backups

  • dk3veeam1repo1.virtualdatacenter.nu
  • dk3veeam14repo1.virtualdatacenter.nu
  • dk3veeam17repo1.virtualdatacenter.nu
  • dk3veeam34repo1.virtualdatacenter.nu
  • dk3veeam86repo2.virtualdatacenter.nu
  • dk3veeam130repo1.virtualdatacenter.nu

Cloud Connect
Microsoft 365 Backup

Vi er igang med at undersøge årsagen til udfaldet. For nu har vi ikke nogen ETA på hvornår vi forventer løsningerne online igen men vi opdaterer på timebasis. Da vi allerede er tæt på kl. 15:00 vil næste update være kl. 16:00

Opdateringer
  • 5 days ago

    Microsoft 365 Backup services er kørende og fungerende igen

  • 5 days ago

    Vores Image Backup konsoller samt Cloud Connect er kørende og fungerende igen.

    Vi arbejder videre på at bringe Microsoft 365 Backup services online.

    Næste update så snart vi har ny information eller senest kl. 20.

  • 5 days ago

    Vi kan se, at services begynder at komme online igen, og driften stabiliseres stille og roligt.

    Vi følger op løbende og opdaterer.
    Næste update kl.17:00

Incident TSM7.zitcom.dk backup server down Nedbrud Løst

Start: 17 days ago 17 days ago
Beskrivelse af udmelding

TSM7.zitcom.dk Backup Server is down.
Scheduled backups and restores via TSM7 are currently unavailable.
Restores can still be performed directly from the target server. We are actively troubleshooting the issue in coordination with our backup supplier. Next update will be provided as soon as new information is available.

Opdateringer
  • 17 days ago

    The server is back online, and backup and restore services are fully available again.
    Sorry for the inconvenience.

TSM7.zitcom.dk backup server down Nedbrud Løst

Start: 23 days ago 22 days ago
Beskrivelse af udmelding

TSM7.zitcom.dk Backup Server is down.
Scheduled backups and restores via TSM7 are currently unavailable.
Restores can still be performed directly from the target server. We are actively troubleshooting the issue in coordination with our backup supplier. Next update will be provided as soon as new information is available.

Opdateringer
  • 22 days ago

    The server is back online, and backup and restore services are fully available again.
    Sorry for the inconvenience.

Driftsmelding: Udfald på GPU-as-a-Service Nedbrud Løst

Start: 27 days ago 27 days ago
Beskrivelse af udmelding

Vi oplever i øjeblikket udfald på vores GPU-as-a-Service platform. Følgende maskiner er berørt:

  • node40.gpufactory.io
  • node53.gpufactory.io
  • node99.gpufactory.io

Vi arbejder på at genoprette driften hurtigst muligt og følger op med en opdatering, så snart vi har mere information.

Vi beklager de gener, dette måtte medføre.

Opdateringer
  • 27 days ago

    Driften er nu genoprettet

DDOS angreb mod DK2 Nedbrud Løst

Start: 1 month ago 26 days ago
Beskrivelse af udmelding

Vi er i øjeblikket under et større DDOS angreb mod vores DK2 site.

Dette kan skabe længere svartid og i værste fald kortvarigt netværksudfald.

Mitigering er igangsat og vi arbejder intensivt på at normalisere driften.

Opdateringer
  • 1 month ago

    Yderligere mitigering er blevet implementeret og vi har set stabilitet de sidste timer.

    Vi overvåger fortsat situationen.

Infrastructure upgrade of TSM Backup Servers Planlagt arbejde

Start: in 9 days - Forventet slut: in 10 days
Beskrivelse af udmelding

Our TSM Backup service provider will be performing scheduled maintenance on TSM backup servers. During this period, backup operations will be unavailable.
Restore operations will still be possible from target servers. The following backup servers will be affected:
TSM27.zitcom.dk
TSM20.zitcom.dk
TSM24.zitcom.dk
TSM1.zitcom.dk
TSM10.zitcom.dk
TSM12.zitcom.dk
TSM14.zitcom.dk
TSM16.zitcom.dk
TSM3.zitcom.dk
TSM7.zitcom.dk
TSM9.zitcom.dk

Opgradering af Veeam Cloud Connect til version 13.1 Planlagt arbejde

Start: in 2 days - Forventet slut: in 2 days
Beskrivelse af udmelding

Vi opgraderer vores Veeam Cloud Connect platform til Veeam version 13.1.

Bemærk, at Veeam Backup & Replication servere der ikke kører version 12.3.2.X eller nyere, ikke længere er supporteret af Cloud Connect'en efter opgradering til version 13.1.

Vigtig information om servicevinduet

  • Tidspunkt: Mellem kl. 10:00 og 16:00
  • Backup & Restore: Vil være utilgængeligt i ca. 4 timer fra opstart af arbejdet.

Berørte abonnementer:

  • CloudRepo
  • AgentRepo
  • CloudLic

Services: Følgende services vil være berørte under servicevinduet

  • Veeam Cloud Connect: veeamrepo*.hostedservices.nu
  • Veeam Cloud Connect: veeambilling2.hostedservices.nu

Konfigurations rettelse på Object Storage platform Planlagt arbejde Løst

Start: 1 day ago - Slut: 1 day ago
Beskrivelse af udmelding

Årsag til afvikling: Konfigurationsrettelse på Object Storage-platformen

For at rette periodiske 500-fejl i særligt belastede perioder retter vi en række indstillinger på Object Storage-platformen. Dette kræver, at vi genstarter services på noderne én ad gangen.

Under genstarten kan enkelte HTTP-requests fejle med en HTTP 500-fejl. Et retry vil som regel løse dette umiddelbart efter.

Berørte kunder:

Kunder med følgende services er berørt af denne konfigurationsrettelse:

  • objXXXX.obj.storagefactory.io

Risiko for nedetid:

[LAV] – Services genstartes én node ad gangen, hvorefter de øvrige noder overtager trafikken, indtil den genstartede node er klar igen.

Planlagt Opgradering af infrastruktur på OnPay betalingsløsning Planlagt arbejde Løst

Start: 4 days ago - Slut: 4 days ago
Beskrivelse af udmelding

Planlagt opgradering af infrastruktur Kunder med følgende services kan blive påvirket under servicevinduet i form af manglende netværksadgang til servicen: Betalingsgateway.
Risiko for nedetid: Høj. Selvom de berørte dele indgår som del i et redundant setup, kan platformen være utilgængelig, da kritiske komponenter opdateres. Forventede længste udfald er på 1 min.

Vigtig sikkerhedspatch til Citrix på hosted.dk Planlagt arbejde Løst

Start: 9 days ago - Slut: 9 days ago
Beskrivelse af udmelding

Grundet en vigtig sikkerhedsopdatering, som netop er frigivet til Citrix NetScaler, opdaterer vi i aften vores NetScalere, som håndterer Citrix fjernskrivebordsforbindelser til Hosted.dk.

Opdateringen bør ikke påvirke eksisterende forbindelser andet end måske give et kort hop i forbindelsen.
Skulle en session blive afbrudt, så forsøg at starte sessionen på ny.

Opgradering af firewall Planlagt arbejde Løst

Start: 19 days ago - Slut: 19 days ago
Beskrivelse af udmelding

Årsag til afvikling: Opgradering af firewall cluster til 7.4.12

Kunder med følgende services kan blive påvirket under servicevinduet i form af manglende netværksadgang til og fra servere og services:

Produktet: VDC & CRP

  • vdom5.net.dk2, vdom7.net.dk2, vdom8.net.dk2, vdom9.net.dk2, vdom10.net.dk2, vdom15.net.dk2, vdom16.net.dk2, vdom22.net.dk2, vdom24.net.dk2, vdom32.net.dk2, vdom33.net.dk2, vdom34.net.dk2, vdom36.net.dk2, vdom38.net.dk2, vdom39.net.dk2, vdom45.net.dk2, vdom48.net.dk2, vdom51.net.dk2, vdom52.net.dk2, vdom53.net.dk2, vdom55.net.dk2, vdom56.net.dk2, vdom57.net.dk2, vdom60.net.dk2, vdom62.net.dk2, vdom64.net.dk2, vdom67.net.dk2, vdom68.net.dk2, vdom69.net.dk2, vdom71.net.dk2, vdom73.net.dk2, vdom78.net.dk2, vdom79.net.dk2, vdom80.net.dk2, vdom83.net.dk2, vdom85.net.dk2, vdom86.net.dk2, vdom91.net.dk2, vdom92.net.dk2, vdom94.net.dk2, vdom95.net.dk2, vdom96.net.dk2, vdom97.net.dk2, vdom98.net.dk2, vdom99.net.dk2, vdom100.net.dk2, vdom101.net.dk2, vdom102.net.dk2, vdom103.net.dk2, vdom105.net.dk2, vdom108.net.dk2, vdom110.net.dk2, vdom111.net.dk2, vdom112.net.dk2, vdom113.net.dk2, vdom114.net.dk2, vdom116.net.dk2, vdom117.net.dk2, vdom118.net.dk2, vdom119.net.dk2, vdom120.net.dk2, vdom123.net.dk2, vdom125.net.dk2, vdom126.net.dk2, vdom130.net.dk2, vdom132.net.dk2, vdom133.net.dk2, vdom136.net.dk2, vdom137.net.dk2, vdom138.net.dk2, vdom143.net.dk2, vdom144.net.dk2, vdom146.net.dk2, vdom148.net.dk2, vdom150.net.dk2, vdom151.net.dk2, vdom154.net.dk2, vdom156.net.dk2, vdom159.net.dk2, vdom160.net.dk2, vdom161.net.dk2, vdom165.net.dk2, vdom167.net.dk2, vdom170.net.dk2, vdom171.net.dk2, vdom173.net.dk2, vdom176.net.dk2, vdom178.net.dk2, vdom181.net.dk2, vdom185.net.dk2, vdom186.net.dk2, vdom187.net.dk2, vdom188.net.dk2, vdom193.net.dk2, vdom197.net.dk2, vdom198.net.dk2, vdom200.net.dk2, vdom202.net.dk2, vdom206.net.dk2, vdom209.net.dk2, vdom210.net.dk2, vdom212.net.dk2, vdom216.net.dk2, vdom217.net.dk2, vdom219.net.dk2, vdom220.net.dk2, vdom222.net.dk2, vdom223.net.dk2, vdom224.net.dk2, vdom226.net.dk2, vdom227.net.dk2, vdom228.net.dk2, vdom231.net.dk2, vdom233.net.dk2, vdom234.net.dk2, vdom236.net.dk2, vdom237.net.dk2, vdom238.net.dk2, vdom239.net.dk2, vdom240.net.dk2, vdom241.net.dk2, vdom242.net.dk2, vdom243.net.dk2, vdom244.net.dk2, vdom245.net.dk2, vdom247.net.dk2, vdom248.net.dk2, vdom249.net.dk2

Påvirkning:
[MELLEM] Der kan være få sekunders nedetid i det trafikken flyttes til den anden firewall node.

Opdateringer
  • 19 days ago

    Firewall clusteret er opgraderet til 7.4.12.
    I service vinduet har der været længere udfald end forventet på mellem 2-3 minutter.

System work on TSM16.zitcom.dk backup server Planlagt arbejde Løst

Start: 23 days ago - Slut: 23 days ago
Beskrivelse af udmelding

Vores backup leverandør skal foretage en vigtigt opdatering og ændring på TSM16.zitcom.dk.
Derfor vil TSM16.zitcom.dk være stoppet og ude af drift i den annonceret periode.

Hvis der normalt køres backup i tidsrummet, kan der forekomme fejl i backup kørslerne.
Disse fejl vil automatisk forsvinde igen, når TSM serveren igen er online eller backup jobs køres igen.

Vi beklager meget de gener som dette måtte give

Opdateringer
  • 23 days ago

    Backup serveren er igen online efter service.

Emergency system work on TSM7.zitcom.dk backup server Planlagt arbejde Løst

Start: 25 days ago - Slut: 25 days ago
Beskrivelse af udmelding

Vores backup leverandør skal foretage en vigtigt ændring på TSM7.zitcom.dk.
Derfor vil TSM7.zitcom.dk være stoppet og ude af drift i den annonceret periode.

Hvis der normalt køres backup i tidsrummet, kan der forekomme fejl i backup kørslerne.
Disse fejl vil automatisk forsvinde igen, når TSM serveren igen er online eller backup jobs køres igen.

Vi beklager meget de gener som dette måtte give.

Opdateringer
  • 25 days ago

    Backup serveren er igen online efter service.

Opgradering af cp.hosted.dk Planlagt arbejde Løst

Start: 26 days ago - Slut: 26 days ago
Beskrivelse af udmelding

Årsag til afvikling:
For at opretholde support og sikkerhed skal vi have opdateret platformen.

Hvem bliver påvirket?:
Alle kunder vil ikke kunne tilgå cp.hosted.dk under opdateringen

Nedetid:
cp.hosted.dk vil ikke være tilgængelig under opdateringen, som er planlagt til at tage 4 timer

Opdatering af VMware platform Planlagt arbejde Løst

Start: 1 month ago - Slut: 8 days ago
Beskrivelse af udmelding

Årsag til afvikling: Opdatering af VMware platform
Vi opdaterer alle vores ESXi hosts til nyeste 8.0 release
Grundet VMSA-2026-0006 udføres denne opdatering med kort varsel

Kunder med følgende services er berørt af denne opdatering:

  • VDC - Virtual Datacenter
  • CRP - Cloud Ressource Pool

Opdateringerne kommer til at ske, i perioden fra onsdag d. 29. juli til og med fredag d. 21. August, i tidsrummet fra kl. 17 til kl. 05.

Under opdateringen vil VMs migrere rundt mellem de resterende hosts i clusteret, på samme vis som DRS i dag automatisk migrere VMs rundt for at sprede loadet bedst muligt.
Dette vil have minimal indvirkning på VMs der ligger i clusteret, dog kan mere sensitive VMs mærke til dette, i form af korte timeouts mens de flyttes mellem hosts.