Michele Liberi software

Michele Liberi
mail: mliberi@gmail.com
cell: +393485211456
telegram: @MicheleLiberi

liberix Indice analitico

ck, controlli sui sistemi

Il comando ck è un sistema a plug-in in grado di effettuare una serie di controlli su una o più macchine in rete.

Le macchine possono avere sistemi operativi diversi, l'unico prerequisito è che su ognuna di esse sia installato e configurato il servizio rxs e la suite dei miei programmi.

I singoli controlli, o plug-in, sono a loro volta dei programmi contenuti in una directory ed aventi nel nome un prefisso comune. Essi vengono lanciati in parallelo e per ognuno viene rilevato un return code, con la seguente convenzione:

Il comando ck produce in output una riga per ognuno dei controlli che vengono lanciati, nell'ordine temporale con il quale terminano.

Il return code del comando ck è il più grande dei return code dei controlli che sono stati lanciati.

In associazione con il comando alert, e lanciato ad intervalli di tempo regolari a mezzo crontab o gcron, può essere usato per realizzare un sistema di monitoraggio automatico.

parametri di configurazione
nometiposignificatoesempio
PREFIXstring il prefisso comune di tutti i controlli da lanciare CK_
CKDIRSlist lista delle directories dove cercare le scripts di controllo /var/ck
FAILOGstring il nome del file di log dove vengono memorizzati tutti i controlli che non sono andati a buon fine /logs/ck.log
WSTstring nome macchina (opzionale) e nome directory contenente la tabella woha contenente la lista dei sistemi da monitorare. Di fatto la directory contiene una lista di file, uno per ogni sistema da monitorare. woha.mliberi.top:/woha/admin/servers/.k
TMOnumber tempo massimo in secondi per la connessione ai sistemi TMO=2

Il tipo list è una stringa che contiene una lista di valore separati da uno o più spazi.

I parametri di configurazione possono essere indicati direttamente sulla linea di comando oppure memorizzati nel file $inidir/ck.ini. Esempio:

PREFIX=CK_ CKDIRS=/lx/ck FAILOG= WST=woha:/woha/admin/servers/.k TMO=3 [15m] CKDIRS=/lx/ck/15m [4h] CKDIRS=/lx/ck/4h

Nell'esempio ho definito due distinte configurazioni: una per un check che deve girare ogni 15 minuti, e la seconda per un check che deve girare ogni 4 ore. Il nome della configurazione da usare si indica con l'opzione -p. Esempio: ck -p4h

Il modo più semplice per gestire e mantenere la lista dei sistemi da monitorare è usare il woha, ma non è strettamente necessario. In alternativa bisogna creare nella directory $WST un file per ognuno dei sistemi che si vogliono monitorare, contenente alcuni attributi:

Esempio:

woha row
23 0 3
hostname/tecnimA
os/AIX
ck/true
env/prod

I plug-in

Il comando ck esegue nativamente un solo check, che consiste nel verificare se il server risponde al ping. Dopo questa prima verifica elementare ck lancia in parallelo tutti i plug-in configurati che hanno risposto al ping.

Descrivo brevemente i plug-in che ho realizzato e che possono essere riutilizzati per nuove installazioni:

df
Controlla il livello di riempimento dei filesystem. Genera un WARNING se viene superata una soglia, e genera ERROR se viene superata una seconda soglia. Ogni filesystem può avere soglie personalizzate (tramite un file di configurazione). Per tutti i filesystem che non hanno soglie personalizzate ck utilizzerà dei valori di default.
ps
Controlla la presenza di processi. Ogni server ha una lista di processi che devono essere attivi per la corretta erogazione dei servizi. L'assenza di un processo genera un ERROR se la macchina è di produzione, e un WARNING negli altri casi. Rileva e segnala eventuali problemi di accesso alla VGDA (volume group descriptor area) presente su ognuno dei dischi fisici (PV).
stalepv
Questo controllo viene fatto solo sui server con sistema operativo IBM AIX. Rileva e segnala dischi fisici (PV) non funzionanti. Tale condizione può essere del tutto trasparente per il funzionamento del sistema nei casi di dati presenti in più copie, ma può essere anche potenzialmente molto pericolosa al verificarsi di ulteriori rotture.
vgda
Questo controllo viene fatto solo sui server con sistema operativo IBM AIX.
paging
Controlla il livello di riempimento dei paging space (swap). Se il livello supera una soglia critica interviene attivamente aumentando, ove possibile lo spazio ad esso dedicato. Infatti in questi casi è molto importante intervenire tempestivamente per riportare il livello di riempimento al di sotto della soglia critica.
crontab
Controlla un componente molto importante e delicato del sistema: lo schedulatore di comandi crontab.

Un blocco di questo sottosistema, purtroppo non infrequente, inibisce l'esecuzione di attività che la macchina esegue automaticamente.

Oltre a verificare che il crontab sia attivo, questo plug-in verifica che il numero di sottoprocessi da esso generato sia inferiore ad una soglia limite. Un eccessivo proliferare di sottoprocessi (comandi lanciati che per qualche motivo rimangono bloccati e non terminano) produce infatti una condizione di impossibilità di lanciare nuovi comandi e conseguente blocco del sistema.

errpt
Questo controllo viene fatto solo sui server con sistema operativo IBM AIX. Rileva e segnala eventuali errori che si sono verificati a livello di sistema operativo nelle ultime 4 ore.
fs
Si tratta di un controllo che verifica la corretta corrispondenza tra filesystem definiti e filesystem montati.
Lo scopo è quello di impedire che lo spegnimento e riaccensione di una macchina portino ad una configurazione diversa da quella attuale e conseguenti malfunzionamenti.
Se un filesystem è definito con automount=yes mi aspetto di trovarlo montato.
Se un filesystem è montato mi aspetto di trovarlo tra i filesystem definiti con automount=yes.
Viene generato un ERROR solo se il server è di produzione, un WARNING negli altri casi.
if
Controlla che il sistema abbia tutte e sole le interfacce di rete attive, e segnala eventuali anomalie.
In fase di configurazione si prepara una lista delle interfacce che ci si aspetta di trovare su ognuno dei server, ed eventuali discrepanza tra la situazione attesa e quella effettiva vengono rilevate e segnalate.
hosts
Verifica la correttezza del file /etc/hosts, che viene utilizzao dal sistema operativo per la risoluzione dei nomi di rete, cioè la risoluzione di un nome nel corrispondente indirizzo IP e viceversa.
Se ad un nome corrispondono più indirizzi IP, oppure lo stesso indirizzo IP è definito più volte, la definizione è ambigua e fonte di potenziali problemi e quindi viene segnalata.
Il controllo viene eseguito indipendentemente per indirizzi IP V4 e V6.
rootmail
Rileva e segnala la presenza di e-mail destinate all'utente root.
Si tratta di e-mail potenzialmente importanti per l'integrità e buon funzionamento del sistema, in quanto possono contenere errori generati da job automatici del server, o generati da strumenti diagnostici.
ln
Controlla che nel sistema non ci siano dangling sym link, che sono link simbolici che fanno riferimento a file che non esistono. La presenza di file di questo tipo può dar luogo a diversi errori applicativi difficili da diagnosticare.
sms
Verifica il corretto funzionamento del dèmone smsd che invia e riceve messaggi SMS.
Segnala il fatto che il dèmone non risponda, e segnala la presenza di messaggi SMS in uscita fermi da più di un'ora.
LDAP
Verifica che il binding tra il server ed il sistema LDAP sia attivo e funzionante.
datadomain
Questo plug-in preleva via ssh da una lista di DATADOMAIN eventuali messaggi di errore e li segnala. Al superamento di una soglia configurabile segnala il livello di riempimento del datadomain.
HACMP
Questo plug-in esegue una serie di controlli su una lista di cluster HACMP:
SAN
Questo plug-in controlla che il collegamento tra sistema operativo e SAN (storage area network) funzioni correttamente.
Di solito un singolo malfunzionamento non è critico e può passare inosservato perché i percorsi sono solitamente ridondati.
È però molto importante che questi malfunzionamenti vengano rilevati e corretti prima che il fallimento di altri percorsi determini la non raggiungibilità di una partizione. I problemi in questo caso potrebbero essere gravi.
TSM
Effettua una serie di controlli sul TSM (Tivoli Storage Manager):
IBM MQ Manager
Questo plug-in esegue una serie di verifiche su una lista di IBM MQ Manager:
informix
Questo plug-in esegue una serie di verifiche su un database INFORMIX:
oracle
Esegue una lista di controlli su tutti i database ORACLE configurati: Genera ERROR solo per le macchine di produzione.

In caso di TS che supera il livello massimo di riempimento, questo plug-in produce anche i comandi SQL per allargare il tablespace.

Per ulteriori informazioni sulla sintassi di attivazione e sulle opzioni disponibili lanciare il comando con l'opzione -h.


(c) M. Liberi, last updated: 2026-07-01