Michele Liberi software
|
|
Michele Liberi
mail: mliberi@gmail.com
cell: +393485211456
telegram: @MicheleLiberi
|
liberix
- Presentazione
- Servizi
- Comandi
- comandi per la gestione dei sistemi
- n, punto unico di controllo per N servers
- ck, controlli sui sistemi
- alert, invio di avvisi su più canali
- comm5, sincronizzazione di file
- comm7, sincronizzazione di file e metadati
- gcron, schedulatore globale
- nbru, gestione centralizzata dei backup
- rxcp, copia di file
- pst, gerarchia dei processi
- dut, spazio utilizzato dalle directory
- mon, lancia ciclicamente un comando
- ckhosts, verifica file hosts
- lscron, lista di tutti i job lanciati da cron
- lspwdage, resoconto delle età delle password
- logaway, gestione file di log
- eddy, selezione con editor di file da rinominare o cancellare
- lnsm, invio e-mail
- sms, invio messaggi SMS
- logwriter, scrittura controllata file di log
- aixb, backup completo del sistema AIX
- comandi oltre lo standard UNIX
- comandi UNIX migliorati
- comandi ad uso crittografico
- X client
- Applicazioni web
- Siti web
- Applicazioni Android
- Programmi DOS
- Programmi Windows
- Librerie
- Installazione
- Licenza d'uso
Indice analitico
Il comando ck è un sistema a plug-in in grado di effettuare una serie di controlli su una o più macchine in rete.
Le macchine possono avere sistemi operativi diversi, l'unico prerequisito è che su ognuna di esse sia installato e configurato il servizio rxs e la suite dei miei programmi.
I singoli controlli, o plug-in, sono a loro volta dei programmi contenuti in una directory ed aventi nel nome un prefisso comune.
Essi vengono lanciati in parallelo e per ognuno viene rilevato un return code, con la seguente convenzione:
- rc=0: nessun problema
- rc=1: si è verificato un warning, una condizione che richiede attenzione
- rc=2: c'è un errore, una condizione che richiede un intervento
Il comando ck produce in output una riga per ognuno dei controlli che vengono lanciati, nell'ordine temporale con il quale terminano.
Il return code del comando ck è il più grande dei return code dei controlli che sono stati lanciati.
In associazione con il comando alert, e lanciato ad intervalli di tempo regolari a mezzo crontab o gcron, può essere usato per realizzare un sistema di monitoraggio automatico.
parametri di configurazione
| nome | tipo | significato | esempio
|
|---|
| PREFIX | string
| il prefisso comune di tutti i controlli da lanciare
| CK_
|
| CKDIRS | list
| lista delle directories dove cercare le scripts di controllo
| /var/ck
|
| FAILOG | string
| il nome del file di log dove vengono memorizzati tutti i controlli che non sono andati a buon fine
| /logs/ck.log
|
| WST | string
| nome macchina (opzionale) e nome directory contenente la tabella woha contenente la lista dei sistemi da monitorare. Di fatto la directory contiene una lista di file, uno per ogni sistema da monitorare.
| woha.mliberi.top:/woha/admin/servers/.k
|
| TMO | number
| tempo massimo in secondi per la connessione ai sistemi
| TMO=2
|
Il tipo list è una stringa che contiene una lista di valore separati da uno o più spazi.
I parametri di configurazione possono essere indicati direttamente sulla linea di comando oppure memorizzati nel file $inidir/ck.ini.
Esempio:
PREFIX=CK_
CKDIRS=/lx/ck
FAILOG=
WST=woha:/woha/admin/servers/.k
TMO=3
[15m]
CKDIRS=/lx/ck/15m
[4h]
CKDIRS=/lx/ck/4h
Nell'esempio ho definito due distinte configurazioni: una per un check che deve girare ogni 15 minuti, e la seconda per un check che deve girare ogni 4 ore.
Il nome della configurazione da usare si indica con l'opzione -p.
Esempio: ck -p4h
Il modo più semplice per gestire e mantenere la lista dei sistemi da monitorare è usare il woha, ma non è strettamente necessario.
In alternativa bisogna creare nella directory $WST un file per ognuno dei sistemi che si vogliono monitorare, contenente alcuni attributi:
- hostname: il nome con cui raggiungere la macchina via TCP/IP
- os: il sistema operativo (si ottiene con il comando
uname
- ck: {true|false} flag indicante se eseguire o meno i controlli
- env: {prod|test|svil} indica se si tratta di un server di produzione, test o sviluppo, per alcuni check il livello passa da ERROR a WARNING se il server non è di produzione.
Esempio:
woha row
23 0 3
hostname/tecnimA
os/AIX
ck/true
env/prod
I plug-in
Il comando ck esegue nativamente un solo check, che consiste nel verificare se il server risponde al ping.
Dopo questa prima verifica elementare ck lancia in parallelo tutti i plug-in configurati che hanno risposto al ping.
Descrivo brevemente i plug-in che ho realizzato e che possono essere riutilizzati per nuove installazioni:
- df
- Controlla il livello di riempimento dei filesystem.
Genera un WARNING se viene superata una soglia, e genera ERROR se viene superata una seconda soglia.
Ogni filesystem può avere soglie personalizzate (tramite un file di configurazione).
Per tutti i filesystem che non hanno soglie personalizzate
ck utilizzerà dei valori di default.
- ps
- Controlla la presenza di processi.
Ogni server ha una lista di processi che devono essere attivi per la corretta erogazione dei servizi.
L'assenza di un processo genera un ERROR se la macchina è di produzione, e un WARNING negli altri casi.
Rileva e segnala eventuali problemi di accesso alla VGDA (volume group descriptor area) presente su ognuno dei dischi fisici (PV).
- stalepv
- Questo controllo viene fatto solo sui server con sistema operativo IBM AIX.
Rileva e segnala dischi fisici (PV) non funzionanti.
Tale condizione può essere del tutto trasparente per il funzionamento del sistema nei casi di dati presenti in più copie, ma può essere anche potenzialmente molto pericolosa al verificarsi di ulteriori rotture.
- vgda
- Questo controllo viene fatto solo sui server con sistema operativo IBM AIX.
- paging
- Controlla il livello di riempimento dei paging space (swap).
Se il livello supera una soglia critica interviene attivamente aumentando, ove possibile lo spazio ad esso dedicato.
Infatti in questi casi è molto importante intervenire tempestivamente per riportare il livello di riempimento al di sotto della soglia critica.
- crontab
- Controlla un componente molto importante e delicato del sistema: lo schedulatore di comandi
crontab.
Un blocco di questo sottosistema, purtroppo non infrequente, inibisce l'esecuzione di attività che la macchina esegue automaticamente.
Oltre a verificare che il crontab sia attivo, questo plug-in verifica che il numero di sottoprocessi da esso generato sia inferiore ad una soglia limite.
Un eccessivo proliferare di sottoprocessi (comandi lanciati che per qualche motivo rimangono bloccati e non terminano) produce infatti una condizione di impossibilità di lanciare nuovi comandi e conseguente blocco del sistema.
- errpt
- Questo controllo viene fatto solo sui server con sistema operativo IBM AIX.
Rileva e segnala eventuali errori che si sono verificati a livello di sistema operativo nelle ultime 4 ore.
- fs
- Si tratta di un controllo che verifica la corretta corrispondenza tra filesystem definiti e filesystem montati.
Lo scopo è quello di impedire che lo spegnimento e riaccensione di una macchina portino ad una configurazione diversa da quella attuale e conseguenti malfunzionamenti.
Se un filesystem è definito con automount=yes mi aspetto di trovarlo montato.
Se un filesystem è montato mi aspetto di trovarlo tra i filesystem definiti con automount=yes.
Viene generato un ERROR solo se il server è di produzione, un WARNING negli altri casi.
- if
- Controlla che il sistema abbia tutte e sole le interfacce di rete attive, e segnala eventuali anomalie.
In fase di configurazione si prepara una lista delle interfacce che ci si aspetta di trovare su ognuno dei server, ed eventuali discrepanza tra la situazione attesa e quella effettiva vengono rilevate e segnalate.
- hosts
- Verifica la correttezza del file /etc/hosts, che viene utilizzao dal sistema operativo per la risoluzione dei nomi di rete, cioè la risoluzione di un nome nel corrispondente indirizzo IP e viceversa.
Se ad un nome corrispondono più indirizzi IP, oppure lo stesso indirizzo IP è definito più volte, la definizione è ambigua e fonte di potenziali problemi e quindi viene segnalata.
Il controllo viene eseguito indipendentemente per indirizzi IP V4 e V6.
- rootmail
- Rileva e segnala la presenza di e-mail destinate all'utente root.
Si tratta di e-mail potenzialmente importanti per l'integrità e buon funzionamento del sistema, in quanto possono contenere errori generati da job automatici del server, o generati da strumenti diagnostici.
- ln
- Controlla che nel sistema non ci siano dangling sym link, che sono link simbolici che fanno riferimento a file che non esistono.
La presenza di file di questo tipo può dar luogo a diversi errori applicativi difficili da diagnosticare.
- sms
- Verifica il corretto funzionamento del dèmone
smsd che invia e riceve messaggi SMS.
Segnala il fatto che il dèmone non risponda, e segnala la presenza di messaggi SMS in uscita fermi da più di un'ora.
- LDAP
- Verifica che il binding tra il server ed il sistema LDAP sia attivo e funzionante.
- datadomain
- Questo plug-in preleva via ssh da una lista di DATADOMAIN eventuali messaggi di errore e li segnala. Al superamento di una soglia configurabile segnala il livello di riempimento del datadomain.
- HACMP
- Questo plug-in esegue una serie di controlli su una lista di cluster HACMP:
- confronto directory sui nodi del cluster: è molto importante in caso di switch che i due nodi siano allineati. Questa condizione è essenziale per il corretto funzionamento dei servizi in caso di spostamento di una o più risorse da un nodo ad un altro del cluster
- stato del cluster: tramite il comando
cldump verifica che il cluster sia in uno stato consistente o in uno stato anomalo
- Se il cluster è attivo e stabile, salva i crontab dei vari nodi in modo da poter gestire la loro attivazione su altro nodo in caso di spostamento di un servizio legato ad una risorsa.
- SAN
- Questo plug-in controlla che il collegamento tra sistema operativo e SAN (storage area network) funzioni correttamente.
Di solito un singolo malfunzionamento non è critico e può passare inosservato perché i percorsi sono solitamente ridondati.
È però molto importante che questi malfunzionamenti vengano rilevati e corretti prima che il fallimento di altri percorsi determini la non raggiungibilità di una partizione.
I problemi in questo caso potrebbero essere gravi.
- TSM
- Effettua una serie di controlli sul TSM (Tivoli Storage Manager):
- backup falliti nel log degli eventi
- livello di riempimento del DB
- livello di riempimento file di log
- numero di copie di backup del DB
- numero di nastri con livello di riempimento inferiore al 30%
- volumi in stato di errore o non disponibili
- unità nastro offline
- numero di nastri vuoti utilizzabili per futuri backup
- nastri non inizializzati (e quindi non utilizzabili)
- IBM MQ Manager
- Questo plug-in esegue una serie di verifiche su una lista di IBM MQ Manager:
- verifica che, a livello AIX, esista il processo amqzxma0, ovvero che il server MQ sia in esecuzione
- invia al server MQ, tramite runmqsc, il comando PING QMGR, per verificare che sia attivo
- per una lista di canali verifica l'esistenza del processo runmqchi
- verifica che i canali di trasmissione siano attivi in presenza di messaggi da inviare
- verifica che i canali di ricezione siano attivi
- verifica che le code in TRIGGER non siano bloccate
- verifica che i messaggi non rimangano in coda per più di 4h senza essere processati
- informix
- Questo plug-in esegue una serie di verifiche su un database INFORMIX:
- verifica se l'istanza è attiva o bloccata
- verifica il livello di riempimento dello spazio disponibile con soglie distinte per WARNING ed ERROR
- verifica il livello di riempimento della tabella di locking con soglie distinte per WARNING ed ERROR
- verifica il numero di aree di memoria condivisa con soglie distinte per WARNING ed ERROR
- verifica il numero di sessioni aperte con soglie distinte per WARNING ed ERROR
- rileva chunk in stato anomalo
- rileva problemi sul logging fisico
- rileva problemi sul logging logico
- rileva file di log non salvati
- verifica che gli ulimit dell'utente informix siano correttamente impostati
- oracle
- Esegue una lista di controlli su tutti i database ORACLE configurati:
- livello di riempimento dei tablespace (con soglie diverse in base al TS)
- livello di utilizzo delle sessioni
- allineamento DATAGUARD
Genera ERROR solo per le macchine di produzione.
In caso di TS che supera il livello massimo di riempimento, questo plug-in produce anche i comandi SQL per allargare il tablespace.
Per ulteriori informazioni sulla sintassi di attivazione e sulle opzioni disponibili lanciare il comando con l'opzione -h.
(c) M. Liberi, last updated: 2026-07-01