[Mail] Exchange ospitato (SE) — incidente risolto

Verifica in corso. Dopo la manutenzione Exchange SE di sabato sera, diverse segnalazioni dagli utenti da circa 08:00 CEST. I team controllano cluster e servizi (DAG, transport, accesso client). Prossimo aggiornamento appena possibile.

Aggiornamento — indagine in corso. I nostri team continuano a lavorare sulle instabilità Exchange SE e cercano attivamente soluzioni per stabilizzare i server interessati.

Durante la notte sono stati applicati cambiamenti tecnici su diversi server, inclusi rollback parziali della manutenzione — problemi intermittenti ancora presenti.

Prime analisi: instabilità a livello host (servizi di sistema / ri-enumerazione hardware dopo reboot), Exchange non è la causa principale. Comportamento sporadico; causa esatta dei crash non ancora riprodotta.

Rassicurazione: in caso di instabilità, i database Exchange vengono smontati e protetti automaticamente — i dati restano al sicuro. Aggiornamenti a seguire.

Aggiornamento. Abbiamo eseguito il rollback completo delle modifiche della manutenzione programmata di sabato sera sui host Exchange SE interessati. Il problema non è risolto: disturbi intermittenti persistono, causa esatta non ancora individuata, nessuna correzione definitiva applicata.

I team restano mobilizzati — verifiche, test e analisi in corso sull’instabilità a livello host. Comportamento sporadico, non riproducibile su richiesta al momento.

Exchange è impattato di conseguenza da questa instabilità host, senza difetto Exchange identificato. Se necessario, i database vengono protetti automaticamente (smontati). Ci stiamo ancora lavorando — aggiornamento a seguire.

Aggiornamento. Verifiche e troubleshooting sugli host Exchange SE ripartono dalle 21:00 CEST (19:00 UTC) stasera. Ambito: controlli salute host, validazione storage/percorsi accesso, revisione DAG/transport/servizi, correlazione log eventi di instabilità.

Incidente ancora aperto — causa root non confermata. Aggiornamento al termine del ciclo.

Aggiornamento. Dopo diverse ore abbiamo applicato più interventi correttivi sugli host Exchange SE interessati. Purtroppo un nodo Windows Server 2025 Core è crashato di nuovo — l’instabilità a livello host persiste.

In parallelo stiamo installando un nuovo ambiente pulito: 12 nuovi server Exchange SE sono in preparazione. Vi terremo informati.

Situazione attuale: la piattaforma esistente resta operativa, ma disturbi casuali possono verificarsi in qualsiasi momento fino a stabilizzazione o migrazione. I database vengono protetti automaticamente se necessario.

Aggiornamento — lavori in corso. I team continuano a lavorare sull’incidente Exchange SE: troubleshooting host, monitoraggio della piattaforma esistente e preparazione del nuovo ambiente (12 server). Nessuna correzione definitiva al momento — possibili disturbi intermittenti. Vi terremo informati.

Aggiornamento — incidente database (stanotte). A seguito delle instabilità host in corso, diversi database Exchange sono stati impattati nella notte e hanno richiesto riparazione manuale dopo smontaggio non pianificato.

Avviata riparazione integrità su store interessati (es. DBSE04-003 — eseutil /p in corso). Operazioni molto lunghe, non accelerabili senza rischio. Lavori ancora in corso.

Piattaforma esistente parzialmente disponibile; impatto variabile per casella/database. In parallelo: nuovo ambiente (12 server Exchange SE).

Ci scusiamo sinceramente. I team lavorano da diversi giorni senza sosta, anche di notte, per un ripristino sicuro. Aggiornamenti a seguire.

Aggiornamento — recovery DBSE & storage. Eseguiti più cicli di riparazione su store DBSE interessati (soft recovery / eseutil per store). Stato attuale: circa 75–80% dei database ripristinati con successo; resto in recovery attiva.

Storage: I/O SAN molto elevati sul footprint Exchange. In parallelo, guasto disco fisico su SAN12 (GEN01); pool ZFS in rebuild — rallentamento significativo di recovery DBSE e risposta host/storage.

Incidente aperto. Recovery + monitoraggio rebuild ZFS. Aggiornamento al prossimo traguardo.

Aggiornamento — storage & recovery DBSE. SAN12 (GEN01): resilver/rebuild ZFS completato — pool nei parametri attesi; monitoraggio rafforzato dischi e I/O host.

Exchange: un database DBSE aggiuntivo ripristinato, store montato, mailbox riattivate. Avvio del successivo — procedura graduale con verifiche prudenti.

Recovery complessivo ~75–80% store online; coda per il resto. Incidente aperto — avanzamento cauto con controllo host, SAN e telemetria dischi.

Aggiornamento. I team continuano a lavorare attivamente sul ripristino dei database DBSE — recovery graduale, con monitoraggio di host, SAN e dischi. Incidente ancora aperto. Grazie per la pazienza.

Aggiornamento — ancora in corso. Durante la riparazione di DBSE04-006, nuovo crash Windows sull’host — finestra di recovery interrotta.

Per limitare il rischio sulle database già attive, migrazione dell’EDB verso un altro nodo del cluster; ripresa repair/mount da lì con monitoraggio host/storage rafforzato.

Incidente aperto. Recovery DBSE sulle restanti — graduale. Grazie per la pazienza.

Aggiornamento — 2° giorno recovery intensiva. Dopo due giorni di ripristino DBSE — con instabilità Windows e I/O SAN molto elevati in parallelo — tutti gli altri database sono online.

DBSE04-006 ancora critico: corruzione sulla primary e, al momento, anche sulle altre due copie. Lavoro in corso per tentare di recuperare almeno una delle tre copie con metodi sicuri.

Situazione impegnativa per i team; restiamo operativi. Incidente aperto. Grazie per la pazienza — aggiornamento al prossimo traguardo.

Aggiornamento — traguardo recovery. Grazie a uno snapshot ZFS valido, recuperata una copia integre di DBSE04-006; tutti i database Exchange sono online.

Non possiamo ancora confermare l’assenza di nuovi crash Windows Server — monitoraggio rafforzato attivo. La manutenzione/aggiornamento di sabato sera ha destabilizzato il footprint Windows Server 2025 Core; ci scusiamo per l’impatto.

Piano: 9 nuovi server Exchange SE in preparazione; copie DB nuove e sane, mailbox migrate una alla volta, con prudenza. Incidente aperto — lavori in corso. Grazie per la pazienza.

Aggiornamento. I team continuano su preparazione e test del nuovo ambiente Exchange SE — provisioning, validazione configurazione e test pre-migrazione sui 9 server sostitutivi. Tutti i database online sulla piattaforma esistente; monitoraggio rafforzato.

Migrazione mailbox una alla volta dopo i readiness check. Incidente aperto. Grazie per la pazienza.

Aggiornamento. I team hanno lavorato tutto il week-end sul programma Exchange SE. Il nuovo ambiente pulito è pronto.

Migrazioni mailbox in corso — cutover uno alla volta, con controlli pre/post per lotto. Piattaforma legacy monitorata; sorveglianza host/storage attiva.

Incidente aperto fino ai traguardi di migrazione. Grazie per la pazienza — aggiornamento per batch validati.

Aggiornamento — stabilizzazione. La piattaforma Exchange SE è stabile dal 10 giugno 2026.

Migrazioni mailbox al nuovo ambiente in corso — cutover graduali con validazione. Host legacy sotto monitoraggio rafforzato.

Aggiornamento — migrazione completata. Tutti i trasferimenti mailbox al nuovo ambiente Exchange SE completati oggi (30 giugno 2026).

Nuovo footprint in produzione; piattaforma legacy fuori dal percorso attivo. Monitoraggio di routine e validazione in corso.

CHIUSO — servizio ripristinato. Dopo l’instabilità seguita alla manutenzione di sabato sera, recovery e migrazione completati.

Piattaforma stabilizzata dal 10 giugno 2026. Trasferimenti mailbox al nuovo ambiente completati il 30 giugno 2026. Tutti gli store DBSE online; host legacy fuori dal percorso attivo.

Monitoraggio di routine sul nuovo footprint. Grazie per la pazienza.