[Mail] Exchange ospitato (SE) — incidente risolto

Timeline Updates

1. Verifica in corso. Dopo la manutenzione Exchange SE di sabato sera, diverse segnalazioni dagli utenti da circa 08:00 CEST. I team controllano cluster e servizi (DAG, transport, accesso client). Prossimo aggiornamento appena possibile.

   May 31, 2026 at 16:03 (UTC+02:00)

2. Aggiornamento — indagine in corso. I nostri team continuano a lavorare sulle instabilità Exchange SE e cercano attivamente soluzioni per stabilizzare i server interessati.

   Durante la notte sono stati applicati cambiamenti tecnici su diversi server, inclusi rollback parziali della manutenzione — problemi intermittenti ancora presenti.

   Prime analisi: instabilità a livello host (servizi di sistema / ri-enumerazione hardware dopo reboot), Exchange non è la causa principale. Comportamento sporadico; causa esatta dei crash non ancora riprodotta.

   Rassicurazione: in caso di instabilità, i database Exchange vengono smontati e protetti automaticamente — i dati restano al sicuro. Aggiornamenti a seguire.

   Jun 1, 2026 at 12:06 (UTC+02:00)

3. Aggiornamento. Abbiamo eseguito il rollback completo delle modifiche della manutenzione programmata di sabato sera sui host Exchange SE interessati. Il problema non è risolto: disturbi intermittenti persistono, causa esatta non ancora individuata, nessuna correzione definitiva applicata.

   I team restano mobilizzati — verifiche, test e analisi in corso sull’instabilità a livello host. Comportamento sporadico, non riproducibile su richiesta al momento.

   Exchange è impattato di conseguenza da questa instabilità host, senza difetto Exchange identificato. Se necessario, i database vengono protetti automaticamente (smontati). Ci stiamo ancora lavorando — aggiornamento a seguire.

   Jun 1, 2026 at 12:09 (UTC+02:00)

4. Aggiornamento. Verifiche e troubleshooting sugli host Exchange SE ripartono dalle 21:00 CEST (19:00 UTC) stasera. Ambito: controlli salute host, validazione storage/percorsi accesso, revisione DAG/transport/servizi, correlazione log eventi di instabilità.

   Incidente ancora aperto — causa root non confermata. Aggiornamento al termine del ciclo.

   Jun 1, 2026 at 19:13 (UTC+02:00)

5. Aggiornamento. Dopo diverse ore abbiamo applicato più interventi correttivi sugli host Exchange SE interessati. Purtroppo un nodo Windows Server 2025 Core è crashato di nuovo — l’instabilità a livello host persiste.

   In parallelo stiamo installando un nuovo ambiente pulito: 12 nuovi server Exchange SE sono in preparazione. Vi terremo informati.

   Situazione attuale: la piattaforma esistente resta operativa, ma disturbi casuali possono verificarsi in qualsiasi momento fino a stabilizzazione o migrazione. I database vengono protetti automaticamente se necessario.

   Jun 2, 2026 at 11:27 (UTC+02:00)

6. Aggiornamento — lavori in corso. I team continuano a lavorare sull’incidente Exchange SE: troubleshooting host, monitoraggio della piattaforma esistente e preparazione del nuovo ambiente (12 server). Nessuna correzione definitiva al momento — possibili disturbi intermittenti. Vi terremo informati.

   Jun 2, 2026 at 19:33 (UTC+02:00)

7. Aggiornamento — incidente database (stanotte). A seguito delle instabilità host in corso, diversi database Exchange sono stati impattati nella notte e hanno richiesto riparazione manuale dopo smontaggio non pianificato.

   Avviata riparazione integrità su store interessati (es. DBSE04-003 — eseutil /p in corso). Operazioni molto lunghe, non accelerabili senza rischio. Lavori ancora in corso.

   Piattaforma esistente parzialmente disponibile; impatto variabile per casella/database. In parallelo: nuovo ambiente (12 server Exchange SE).

   Ci scusiamo sinceramente. I team lavorano da diversi giorni senza sosta, anche di notte, per un ripristino sicuro. Aggiornamenti a seguire.

   Jun 3, 2026 at 04:10 (UTC+02:00)

8. Aggiornamento — recovery DBSE & storage. Eseguiti più cicli di riparazione su store DBSE interessati (soft recovery / eseutil per store). Stato attuale: circa 75–80% dei database ripristinati con successo; resto in recovery attiva.

   Storage: I/O SAN molto elevati sul footprint Exchange. In parallelo, guasto disco fisico su SAN12 (GEN01); pool ZFS in rebuild — rallentamento significativo di recovery DBSE e risposta host/storage.

   Incidente aperto. Recovery + monitoraggio rebuild ZFS. Aggiornamento al prossimo traguardo.

   Jun 3, 2026 at 11:32 (UTC+02:00)

9. Aggiornamento — storage & recovery DBSE. SAN12 (GEN01): resilver/rebuild ZFS completato — pool nei parametri attesi; monitoraggio rafforzato dischi e I/O host.

   Exchange: un database DBSE aggiuntivo ripristinato, store montato, mailbox riattivate. Avvio del successivo — procedura graduale con verifiche prudenti.

   Recovery complessivo ~75–80% store online; coda per il resto. Incidente aperto — avanzamento cauto con controllo host, SAN e telemetria dischi.

   Jun 4, 2026 at 00:22 (UTC+02:00)

10. Aggiornamento. I team continuano a lavorare attivamente sul ripristino dei database DBSE — recovery graduale, con monitoraggio di host, SAN e dischi. Incidente ancora aperto. Grazie per la pazienza.

    Jun 4, 2026 at 03:31 (UTC+02:00)

11. Aggiornamento — ancora in corso. Durante la riparazione di DBSE04-006, nuovo crash Windows sull’host — finestra di recovery interrotta.

    Per limitare il rischio sulle database già attive, migrazione dell’EDB verso un altro nodo del cluster; ripresa repair/mount da lì con monitoraggio host/storage rafforzato.

    Incidente aperto. Recovery DBSE sulle restanti — graduale. Grazie per la pazienza.

    Jun 4, 2026 at 15:43 (UTC+02:00)

12. Aggiornamento — 2° giorno recovery intensiva. Dopo due giorni di ripristino DBSE — con instabilità Windows e I/O SAN molto elevati in parallelo — tutti gli altri database sono online.

    DBSE04-006 ancora critico: corruzione sulla primary e, al momento, anche sulle altre due copie. Lavoro in corso per tentare di recuperare almeno una delle tre copie con metodi sicuri.

    Situazione impegnativa per i team; restiamo operativi. Incidente aperto. Grazie per la pazienza — aggiornamento al prossimo traguardo.

    Jun 4, 2026 at 19:09 (UTC+02:00)

13. Aggiornamento — traguardo recovery. Grazie a uno snapshot ZFS valido, recuperata una copia integre di DBSE04-006; tutti i database Exchange sono online.

    Non possiamo ancora confermare l’assenza di nuovi crash Windows Server — monitoraggio rafforzato attivo. La manutenzione/aggiornamento di sabato sera ha destabilizzato il footprint Windows Server 2025 Core; ci scusiamo per l’impatto.

    Piano: 9 nuovi server Exchange SE in preparazione; copie DB nuove e sane, mailbox migrate una alla volta, con prudenza. Incidente aperto — lavori in corso. Grazie per la pazienza.

    Jun 4, 2026 at 20:37 (UTC+02:00)

14. Aggiornamento. I team continuano su preparazione e test del nuovo ambiente Exchange SE — provisioning, validazione configurazione e test pre-migrazione sui 9 server sostitutivi. Tutti i database online sulla piattaforma esistente; monitoraggio rafforzato.

    Migrazione mailbox una alla volta dopo i readiness check. Incidente aperto. Grazie per la pazienza.

    Jun 6, 2026 at 12:03 (UTC+02:00)

15. Aggiornamento. I team hanno lavorato tutto il week-end sul programma Exchange SE. Il nuovo ambiente pulito è pronto.

    Migrazioni mailbox in corso — cutover uno alla volta, con controlli pre/post per lotto. Piattaforma legacy monitorata; sorveglianza host/storage attiva.

    Incidente aperto fino ai traguardi di migrazione. Grazie per la pazienza — aggiornamento per batch validati.

    Jun 9, 2026 at 14:45 (UTC+02:00)

16. Aggiornamento — stabilizzazione. La piattaforma Exchange SE è stabile dal 10 giugno 2026.

    Migrazioni mailbox al nuovo ambiente in corso — cutover graduali con validazione. Host legacy sotto monitoraggio rafforzato.

    Jun 10, 2026 at 12:00 (UTC+02:00)

17. Aggiornamento — migrazione completata. Tutti i trasferimenti mailbox al nuovo ambiente Exchange SE completati oggi (30 giugno 2026).

    Nuovo footprint in produzione; piattaforma legacy fuori dal percorso attivo. Monitoraggio di routine e validazione in corso.

    Jun 30, 2026 at 17:00 (UTC+02:00)

18. CHIUSO — servizio ripristinato. Dopo l’instabilità seguita alla manutenzione di sabato sera, recovery e migrazione completati.

    Piattaforma stabilizzata dal 10 giugno 2026. Trasferimenti mailbox al nuovo ambiente completati il 30 giugno 2026. Tutti gli store DBSE online; host legacy fuori dal percorso attivo.

    Monitoraggio di routine sul nuovo footprint. Grazie per la pazienza.

    Jun 30, 2026 at 23:59 (UTC+02:00)