Progetto

Generale

Profilo

Azioni

Segnalazione #288

aperta

🔮 [MULTI] Saturazione CPU db-mssql-hr-prod e errore 500 sul portale Musei Italiani

Aggiunto da Marco Menichelli circa un mese fa.

Stato:
Nuovo
Priorità:
Normale
Assegnato a:
-
Inizio:
18-06-2026
Scadenza:
% Completato:

0%

Tempo stimato:

Descrizione

⚠️ ALLERTA PREDITTIVA (LEONARDO ENGINE) ⚠️
Severità Ricalcolata dall'AI: CRITICAL (Base matematica: WARNING)
Probabilità Impatto Ricalcolata: 67%
Time-to-Impact Stimato: 68 minuti

Previsione e Contesto (LLM):
Se non si interviene immediatamente, il business sarà gravemente impattato. Il portale Musei Italiani, che è fondamentale per la vendita dei biglietti, non sarà più accessibile ai visitatori. Questo potrebbe portare a una perdita significativa di vendite e a una frustrazione dei visitatori, che potrebbero non tornare in futuro. Inoltre, il database MSSQL, che gestisce i dati dei biglietti, potrebbe sovraccaricarsi e causare errori di persistenza dei dati, che potrebbero portare a perdite di dati o a problemi di integrità dei dati. Inoltre, il cluster HR potrebbe sovraccaricarsi, causando un impatto negativo sulla gestione delle risorse umane.

Azioni di Mitigazione Suggerite:

  • Verificare e ridurre l'utilizzo di CPU sui server del cluster HR, adottando misure come la ridistribuzione del carico tra i server o l'ottimizzazione del codice sorgente.
  • Implementare misure di failover e di ripristino del servizio per il portale Musei Italiani, in modo da minimizzare l'impatto sul business in caso di nuovo errore 500.

Sistemi Coinvolti: I sistemi coinvolti sono i server del cluster HR, in particolare quelli che stanno eseguendo il database MSSQL (Gestionale HR) e il portale Musei Italiani.
🔥 ROOT CAUSE IDENTIFICATA:
La causa radice del problema è l'elevato utilizzo di CPU sui server del cluster HR, che ha causato un overloading del sistema. Questo ha portato a un errore 500 sul portale Musei Italiani, che è stato verificato da un utente umano. Il problema potrebbe essere dovuto a una mancanza di ottimizzazione del codice sorgente, a una mancanza di misure di failover e di ripristino del servizio, o a una mancanza di monitoraggio adeguato dell'utilizzo di CPU.

Tracciato Deduttivo / Ricalibrazione:
Il ticket è stato aperto in seguito a un allarme che ha rilevato un uso massimo del 99% della CPU sui server del cluster HR. Questo allarme è stato seguito da un errore 500 sul portale Musei Italiani, che è stato verificato da un utente umano. La catena causale è la seguente: un elevato utilizzo di CPU ha causato un overloading del sistema, che ha portato a un errore 500 sul portale. Questo errore 500 è stato verificato da un utente umano, che ha notato che il portale non carica correttamente. Questa sequenza di eventi indica che il problema è gravissimo e richiede immediata attenzione.

--- 📡 EVENTI ORIGINALI CHE HANNO SCATENATO L'ALLARME ---

--- ORIGINE: DATADOG ---
Oggetto: pods down su kubernetes CPU e RAM al 90%
Dettaglio: CPU al 99% rilevata sui server del cluster HR.

--- ORIGINE: HUMAN ---
Oggetto: Ciao, il portale museiitaliani restituisce errore 500 in fase di emissione ticket. Urgente.
Dettaglio: Non riesco ad accedere al portale, carica a vuoto.


🌀 Predictive Ticket generato da PRISM.AI - Leonardo ML Engine

--- 💡 MEMORIA STORICA UTILIZZATA (RAG) ---
Il documento storico evidenzia che l'errore 500 durante il deploy precedente era causato da timeout nella connessione a Keycloak durante lo startup dell'applicazione. Il team di It Ops ha verificato che il problema era dovuto alla risoluzione OIDC in modo 'eager' allo startup, che ha causato la crash dei pod quando Keycloak non rispondeva subito. Il team ha notato che il problema si è presentato solo per un breve periodo durante il deploy e che il pod attualmente sta funzionando senza rallentamenti. Il fix strutturale sarebbe rendere lazy la risoluzione OIDC lato codice. Tuttavia, non c'è stato un problema di disponibilità dei pods o di errore 500 sul portale museiitaliani durante il deploy precedente. Pertanto, non è possibile estendere la soluzione storica al problema attuale senza ulteriori informazioni. Si consiglia di verificare la connettività a Keycloak e di monitorare la risoluzione OIDC per eventuali problemi.

Nessun dato disponibile

Azioni

Esporta su Atom PDF