Health Monitor analizza informazioni sullo spazio su disco, informazioni sulla memoria di sistema ed elabora le informazioni sulla memoria ogni sessanta secondi e memorizza i dati di un giorno in tabelle nello schema delle prestazioni di MySQL Server. Se lo spazio su disco disponibile o la memoria disponibile è inferiore a determinate soglie preimpostate, Health Monitor emette avvisi e lo registra nella tabella performance_schema.error_log.

Health Monitor utilizza unità di storage MiB/GiB/TiB dove 100 GB = 93 GiB.

Lo storage totale disponibile per un sistema DB contiene gli elementi riportati di seguito.

• Storage disponibile: lo spazio su disco dopo la riserva di storage viene escluso dallo storage totale.
• Storage reserve: spazio su disco inferiore alle variabili di configurazione disk_low_space_level e disk_low_space_percent. Il valore predefinito di disk_low_space_level è 5.000 MiB e il valore predefinito di disk_low_space_percent è il 4% dello storage totale.
• Storage critico: lo spazio su disco nella memoria viene riservato al di sotto della soglia critica, definita dalla variabile di configurazione disk_low_space_critical_level. Si tratta dello spazio su disco minimo utilizzabile dal sistema per evitare l'esaurimento del disco. Lo spazio di memorizzazione critico predefinito è 2.000 MiB.

Avvertenze spazio su disco

Quando lo spazio su disco è inferiore a una determinata percentuale dello storage disponibile, Health Monitor emette le seguenti avvertenze e le registra nella tabella performance_schema.error_log:

• WARNING_DISK_USAGE_LEVEL_1: quando lo spazio su disco è inferiore al 20% dello spazio di memorizzazione disponibile.
• WARNING_DISK_USAGE_LEVEL_2: quando lo spazio su disco è inferiore al 10% dello spazio di memorizzazione disponibile.
• WARNING_DISK_USAGE_LEVEL_3: quando lo spazio su disco è inferiore al 5% dello storage disponibile.

Ad esempio, se lo storage totale è 100.000 MiB e la riserva di storage è minore delle due variabili di configurazione riportate di seguito.

• disk_low_space_level: il valore predefinito è 5.000 MiB.
• disk_low_space_percent: rappresenta il 4% dello storage totale, ovvero il 4% di 100.000 MiB = 4.000 MiB.

La riserva di memorizzazione è 4.000 MiB, che è inferiore alle due variabili di configurazione.

È possibile trovare lo stoccaggio disponibile escludendo la riserva di stoccaggio dal deposito totale:

100,000 - 4,000 = 96,000 MiB

Health Monitor genera le seguenti avvertenze:

• WARNING_DISK_USAGE_LEVEL_1: quando lo spazio su disco è inferiore al 20% dello spazio di memorizzazione disponibile, ovvero 20/100*96.000 = 19.200 MiB.
• WARNING_DISK_USAGE_LEVEL_2: quando lo spazio su disco è inferiore al 10% dello storage disponibile, ovvero 10/100*96.000 = 9.600 MiB.
• WARNING_DISK_USAGE_LEVEL_3: quando lo spazio su disco è inferiore al 5% dello storage disponibile, ovvero 5/100*96.000 = 4.800 MiB.

Carenza significativa o prolungata di spazio su disco

Health Monitor definisce una carenza significativa o prolungata di spazio su disco quando vengono soddisfatte le seguenti condizioni:

• Carenza significativa: lo spazio su disco scende al di sotto della soglia critica definita da disk_low_space_critical_level.
• Carenza sostenuta: lo spazio su disco scende al di sotto della riserva di storage, quindi rimane nella riserva di storage per la durata definita dalla variabile di configurazione disk_low_space_duration.

In caso di carenza significativa o prolungata di spazio su disco, Health Monitor esegue le operazioni riportate di seguito.

• SUPER_READ_ONLY=ON: imposta le variabili di sistema, SUPER_READ_ONLY, su ON in MySQL Server. MySQL Server rifiuta tutte le nuove istruzioni di scrittura SQL in entrata (UPDATE, INSERT, DELETE e DDL), indipendentemente dagli utenti e dai privilegi. Il completamento delle transazioni in esecuzione è consentito, ma le nuove scritture sono vietate fino a quando lo spazio su disco non sarà nuovamente disponibile. Non è possibile caricare i dati nel cluster HeatWave quando il server è in modalità SUPER_READ_ONLY.

  In alcuni casi, i lock di lettura globali, i commit in corso o i lock dei metadati impediscono a Health Monitor di impostare la variabile di sistema SUPER_READ_ONLY. In questi casi, se si imposta la variabile health_monitor.disk_fallback_force, Health Monitor identifica e termina le query attive che contengono blocchi globali per impostare la variabile di sistema SUPER_READ_ONLY.

• OFFLINE_MODE=ON: imposta la variabile di sistema, OFFLINE_MODE, su ON in MySQL Server. MySQL Server disconnette gli utenti client che non dispongono del privilegio CONNECTION_ADMIN, arresta le istruzioni in esecuzione e rilascia i blocchi e blocca le nuove connessioni con un errore appropriato.
• super_read_only_disk_full=ON: imposta la variabile di stato, super_read_only_disk_full, su ON per indicare che la modalità di sola lettura è stata attivata a causa dello spazio su disco ridotto. È possibile vedere il valore della variabile di stato super_read_only_disk_full con uno dei comandi seguenti:
  • SHOW GLOBAL STATUS WHERE variable_name = 'super_read_only_disk_full';
  • SELECT * FROM performance_schema.global_status WHERE variable_name = 'super_read_only_disk_full';

Le variabili di sistema cambiano il comportamento di MySQL Server, mentre le variabili di stato sono indicatori statici dello stato di MySQL Server.

Ripristino al funzionamento normale

Una volta impostati i valori SUPER_READ_ONLY e OFFLINE_MODE, Health Monitor esegue le operazioni riportate di seguito.

• Controllare lo spazio su disco ogni minuto .
• Impostare OFFLINE_MODE=OFF se lo spazio su disco disponibile viene recuperato e rimane sopra disk_recovery_level per disk_recovery_time_1 secondi o più.
• Impostare SUPER_READ_ONLY=OFF se lo spazio su disco disponibile viene recuperato e rimane sopra disk_recovery_level per altri disk_recovery_time_2 secondi o più.

Le operazioni normali vengono riprese una volta che lo spazio su disco rimane superiore a disk_recovery_level per disk_recovery_time_1 + disk_recovery_time_2 secondi.

Una volta recuperato lo spazio su disco, Health Monitor cancella le variabili di sistema, SUPER_READ_ONLY e OFFLINE_MODE e la variabile di stato, super_read_only_disk_full. Non è necessario riavviare l'istanza MySQL per cancellare le variabili.

Se si verifica di nuovo una carenza significativa o prolungata di spazio su disco, Health Monitor imposta di nuovo le variabili di sistema SUPER_READ_ONLY e OFFLINE_MODE e la variabile di stato super_read_only_disk_full su ON in MySQL Server.

Prima di riportare un'istanza primaria di un sistema DB High Availability alla modalità operativa normale, Health Monitor verifica che il server sia online con la maggioranza dei gruppi. Health Monitor non imposta mai SUPER_READ_ONLY o OFFLINE_MODE sulle istanze secondarie.

Incremento recupero, ciclo massimo recupero e finestra di recupero

Ogni volta che MySQL Server recupera da una significativa o prolungata carenza di spazio su disco, Health Monitor aumenta il tempo di recupero del disco di disk_recovery_increment secondi.

Ad esempio, se disk_recovery_time_1 = 300 secondi e disk_recovery_time_2 = 600 secondi e disk_recovery_increment = 400 secondi, il tempo di recupero del disco per ogni ciclo è il seguente:

• Ciclo 1: disk_recovery_time_1 = 300 secondi, disk_recovery_time_2 = 600 secondi
• Ciclo 2: disk_recovery_time_1 = (300 + 400) secondi, disk_recovery_time_2 = (600 + 400) secondi
• Ciclo 3: disk_recovery_time_1 = (300+400+400) secondi, disk_recovery_time_2 = (600+400+400) secondi

Health Monitor ripristina alla modalità operativa normale un massimo di disk_recovery_max_cycles volte entro una finestra fissa di disk_recovery_window secondi, dall'ultimo ciclo di recupero. Ad esempio, se disk_recovery_max_cycles è impostato su 5 e disk_recovery_window è impostato su 86.400 secondi (1 giorno), Health Monitor può ripristinare la normale modalità operativa cinque volte in una finestra di 86.400 secondi. Se si verifica una carenza significativa o prolungata la sesta volta nella stessa finestra, le variabili di sistema SUPER_READ_ONLY e OFFLINE_MODE vengono impostate su ON.

Il conteggio di recupero viene reimpostato dopo disk_recovery_window secondi dall'ultimo recupero.

Avvertenze memoria

Quando la memoria disponibile è inferiore a determinate soglie, Health Monitor genera le seguenti avvertenze:

• WARNING_MEMORY_USAGE_LEVEL_1: se la memoria disponibile è inferiore a 1024, MiB.
• WARNING_MEMORY_USAGE_LEVEL_2: quando la memoria disponibile è inferiore a 500 MiB.
• WARNING_MEMORY_USAGE_LEVEL_3: quando la memoria disponibile è inferiore a 100 MiB.

Health Monitor registra le informazioni relative alla versione MySQL, all'uso della memoria globale e a varie impostazioni di configurazione nel log degli errori. Le informazioni vengono registrate come valori separati da virgole per un facile trasferimento in un foglio di calcolo per ulteriori analisi.

Le tabelle Health Monitor memorizzano i dati e le statistiche di monitoraggio nello schema delle prestazioni di MySQL Server.

Le tabelle di integrità contengono informazioni sull'archiviazione su disco, sulla memoria di sistema e sulla memoria di processo.

Le tabelle statistiche contengono statistiche sull'uso della CPU del sistema, sull'uso del disco, sull'uso della memoria e sul processo del server MySQL (mysqld). Ogni tabella delle statistiche ha due versioni, una versione su richiesta, che viene popolata con letture correnti quando si esegue la query e una versione della cronologia per la quale Health Monitor preleva campioni una volta al minuto e conserva un valore giornaliero di dati. Entrambe le versioni della tabella hanno le stesse colonne.

• Uso di un client dalla riga di comando
• Tabelle Health Monitor

Le variabili Health Monitor sono impostazioni di configurazione per l'attività di monitoraggio nel sistema DB. Non è possibile modificare i valori di queste variabili.

• Uso di un client dalla riga di comando
• Variabili Health Monitor

Gli errori, le avvertenze e gli aggiornamenti di stato di Health Monitor vengono registrati in performance_schema.error_log. Health Monitor abbrevia TiB come T, GiB come G e MiB come M nel log degli errori. Ad esempio, 306.6G = 306,6 GiB = 329,2 GB.

[Note] [MY-013694] [Health] Disk Collector: Started: running=ON, monitored='/db', 
sample rate=30s, retention=86400s, max samples=2880, status interval=1, low level=100 MiB, 
low percent=4%, critical level=10 MiB, warning levels=20/10/5%, fallback (enable=ON, force=ON), 
low space duration=300s, recovery (enable=ON, level=5%, time 1=300s, time 2=300s, max cycles=3,
increment=10, window=86400)

[Warning] [MY-013695] [Health] Disk: Warning Level 2 (62M): monitored='/db', 
available=59M, total=466M, used=87.2%, low limit=18M, critical=10M, recovery=40M, 
warnings=107M/62M/40M

[Warning] [MY-013695] [Health] Disk: Low Level (18M): Fallback Timer Running: 300 seconds 
until SUPER_READ_ONLY: monitored='/db', available=15M, total=466M, used=96.6%, low limit=18M, 
critical=10M, recovery=40M, warnings=107M/62M/40M

[Warning] [MY-013695] [Health] Disk: Low Level (18M): Fallback Timer Running: 30 seconds until 
SUPER_READ_ONLY: monitored='/db', available=15M, total=466M, used=96.6%, low limit=18M, critical=10M, 
recovery=40M, warnings=107M/62M/40M
[Warning] [MY-013695] [Health] Disk: Low Level (18M): Fallback Timer Expired
[Warning] [MY-013695] [Health] Disk: Low Level (18M): OFFLINE_MODE = ON
[Warning] [MY-013695] [Health] Disk: Low Level (18M): SUPER_READ_ONLY = ON

[Warning] [MY-013695] [Health] Disk Collector: CRITICAL LEVEL (2G): 
OFFLINE_MODE=ON: mount point='/db', available=1.9G, total=1024G, 
used=99.1%, low limit=5.0G, critical=2.0G, warnings=204G/102G/51G 
[Warning] [MY-013695] [Health] Disk Collector: CRITICAL LEVEL (2G): 
SUPER_READ_ONLY=ON: mount point='/db', available=1.9G, total=1024G, 
used=99.1%, low limit=5.0G, critical=2.0G, warnings=204G/102G/51G

[Warning] [MY-013695] [Health] Disk: Low Level (18M): Fallback Timer Canceled
[Warning] [MY-013695] [Health] Disk: Warning Level 1 (107M): monitored='/db', available=79M, 
total=466M, used=82.9%, low limit=18M, critical=10M, recovery=40M, warnings=107M/62M/40M

[Warning] [MY-013695] [Health] MEMORY: WARNING LEVEL 1 (1.0G): available=950M, total=7.5G, used=87.6%, 
mysqld=5.9G, warnings=1.0G/500M/100M
[Warning] [MY-013695] [Health]  
[Warning] [MY-013695] [Health] ===== MEMORY DIAGNOSTICS BEGIN (csv) =====

---------------------------------------
TOTAL ALLOCATED MEMORY AND BUFFER SIZES
---------------------------------------
keyword,value
mysql_version,8.0.33
total_allocated,15121493496
innodb_buffer_pool_size,13958643712
join_buffer_size,262144
----------------------------------------
MEMORY AGGREGATION PER LOGICAL COMPONENT
----------------------------------------
component,current_count,current_alloc,max_alloc,min_alloc
...<csv data>...

-----------------------
MEMORY USAGE PER THREAD
-----------------------
thread_id,user,current_count_used,current_allocated,current_avg_alloc,current_max_alloc,total_allocated
...<csv data>...

-----------------------
MEMORY USAGE PER USER
-----------------------
user,current_count_used,current_allocated,current_avg_alloc,current_max_alloc,total_allocated
...<csv data>...

-------------------
PROCESSLIST DETAILS
-------------------
thd_id,conn_id,user,db,command,state,time,current_statement,execution_engine,statement_latency,progress,
lock_latency,cpu_latency,rows_examined,rows_sent,rows_affected,tmp_tables,tmp_disk_tables,full_scan,
last_statement,last_statement_latency,current_memory,last_wait,last_wait_latency,source,trx_latency,
trx_state,trx_autocommit,pid,program_name
...<csv data>...

---------------
SESSION DETAILS
---------------
thd_id,conn_id,user,db,command,state,time,current_statement,execution_engine,statement_latency,progress,
lock_latency,cpu_latency,rows_examined,rows_sent,rows_affected,tmp_tables,tmp_disk_tables,full_scan,
last_statement,last_statement_latency,current_memory,last_wait,last_wait_latency,source,trx_latency,
trx_state,trx_autocommit,pid,program_name
...<csv data>...

--------------------------------------------------------
CURRENT STATEMENT PER THREAD ORDERED BY STATEMENT MEMORY
--------------------------------------------------------
THREAD_ID,EVENT_ID,END_EVENT_ID,EVENT_NAME,SOURCE,TIMER_START,TIMER_END,TIMER_WAIT,LOCK_TIME,SQL_TEXT,
DIGEST,DIGEST_TEXT,CURRENT_SCHEMA,OBJECT_TYPE,OBJECT_SCHEMA,OBJECT_NAME,OBJECT_INSTANCE_BEGIN,MYSQL_ERRNO,
RETURNED_SQLSTATE,MESSAGE_TEXT,ERRORS,WARNINGS,ROWS_AFFECTED,ROWS_SENT,ROWS_EXAMINED,CREATED_TMP_DISK_TABLES,
CREATED_TMP_TABLES,SELECT_FULL_JOIN,SELECT_FULL_RANGE_JOIN,SELECT_RANGE,SELECT_RANGE_CHECK,SELECT_SCAN,
SORT_MERGE_PASSES,SORT_RANGE,SORT_ROWS,SORT_SCAN,NO_INDEX_USED,NO_GOOD_INDEX_USED,NESTING_EVENT_ID,
NESTING_EVENT_TYPE,NESTING_EVENT_LEVEL,STATEMENT_ID,CPU_TIME,MAX_CONTROLLED_MEMORY,MAX_TOTAL_MEMORY,
EXECUTION_ENGINE
...<csv data>...

----------------------------------------------------------
CURRENT STATEMENT PER THREAD FOR THREADS USING MOST MEMORY
----------------------------------------------------------
THREAD_ID,EVENT_ID,END_EVENT_ID,EVENT_NAME,SOURCE,TIMER_START,TIMER_END,TIMER_WAIT,LOCK_TIME,SQL_TEXT,
DIGEST,DIGEST_TEXT,CURRENT_SCHEMA,OBJECT_TYPE,OBJECT_SCHEMA,OBJECT_NAME,OBJECT_INSTANCE_BEGIN,MYSQL_ERRNO,
RETURNED_SQLSTATE,MESSAGE_TEXT,ERRORS,WARNINGS,ROWS_AFFECTED,ROWS_SENT,ROWS_EXAMINED,CREATED_TMP_DISK_TABLES,
CREATED_TMP_TABLES,SELECT_FULL_JOIN,SELECT_FULL_RANGE_JOIN,SELECT_RANGE,SELECT_RANGE_CHECK,SELECT_SCAN,
SORT_MERGE_PASSES,SORT_RANGE,SORT_ROWS,SORT_SCAN,NO_INDEX_USED,NO_GOOD_INDEX_USED,NESTING_EVENT_ID,
NESTING_EVENT_TYPE,NESTING_EVENT_LEVEL,STATEMENT_ID,CPU_TIME,MAX_CONTROLLED_MEMORY,MAX_TOTAL_MEMORY,
EXECUTION_ENGINE,thread_id
...<csv data>...

----------------------------------------------------------
STATEMENT HISTORY PER THREAD FOR THREADS USING MOST MEMORY
----------------------------------------------------------
THREAD_ID,EVENT_ID,END_EVENT_ID,EVENT_NAME,SOURCE,TIMER_START,TIMER_END,TIMER_WAIT,LOCK_TIME,SQL_TEXT,
DIGEST,DIGEST_TEXT,CURRENT_SCHEMA,OBJECT_TYPE,OBJECT_SCHEMA,OBJECT_NAME,OBJECT_INSTANCE_BEGIN,MYSQL_ERRNO,
RETURNED_SQLSTATE,MESSAGE_TEXT,ERRORS,WARNINGS,ROWS_AFFECTED,ROWS_SENT,ROWS_EXAMINED,CREATED_TMP_DISK_TABLES,
CREATED_TMP_TABLES,SELECT_FULL_JOIN,SELECT_FULL_RANGE_JOIN,SELECT_RANGE,SELECT_RANGE_CHECK,SELECT_SCAN,
SORT_MERGE_PASSES,SORT_RANGE,SORT_ROWS,SORT_SCAN,NO_INDEX_USED,NO_GOOD_INDEX_USED,NESTING_EVENT_ID,
NESTING_EVENT_TYPE,NESTING_EVENT_LEVEL,STATEMENT_ID,CPU_TIME,MAX_CONTROLLED_MEMORY,MAX_TOTAL_MEMORY,
EXECUTION_ENGINE,thread_id
...<csv data>...

-----------------------------
EVENTS ALLOCATING MOST MEMORY
-----------------------------
processlist_id,processlist_user,thread_id,event_name,count_alloc,count_free,current_count_used,
current_number_of_bytes_used
...<csv data>...

----------------------
BUFFER POOL STATISTICS
----------------------
POOL_ID,POOL_SIZE,FREE_BUFFERS,DATABASE_PAGES,OLD_DATABASE_PAGES,MODIFIED_DATABASE_PAGES,PENDING_DECOMPRESS,
PENDING_READS,PENDING_FLUSH_LRU,PENDING_FLUSH_LIST,PAGES_MADE_YOUNG,PAGES_NOT_MADE_YOUNG,PAGES_MADE_YOUNG_RATE,
PAGES_MADE_NOT_YOUNG_RATE,NUMBER_PAGES_READ,NUMBER_PAGES_CREATED,NUMBER_PAGES_WRITTEN,PAGES_READ_RATE,
PAGES_CREATE_RATE,PAGES_WRITTEN_RATE,NUMBER_PAGES_GET,HIT_RATE,YOUNG_MAKE_PER_THOUSAND_GETS,
NOT_YOUNG_MAKE_PER_THOUSAND_GETS,NUMBER_PAGES_READ_AHEAD,NUMBER_READ_AHEAD_EVICTED,READ_AHEAD_RATE,
READ_AHEAD_EVICTED_RATE,LRU_IO_TOTAL,LRU_IO_CURRENT,UNCOMPRESS_TOTAL,UNCOMPRESS_CURRENT
...<csv data>...