Nagios Conference 2007 | Hardwareüberwachung IPMI by Gerd Müller

NETWAYS GmbH  Deutschherrnstr. 47a  90429 Nürnberg  Tel: 0911/92885-0  info@netways.de
Nagios Konferenz 2007 – Gerd Müller
http://www.netways.de
Hardwareüberwachung
mit IPMI und Nagios
NETWAYS
Nagios Konferenz 2007

Agenda
 Einleitung
Weshalb Hardware überwachen?
Status quo
 IPMI Vorstellung
 IPMI Integration
 IPMI und Nagios
Aktive Checks
Eventhandling
 IPMI und noch mehr ...

IPMI
Einleitung

Weshalb Hardware überwachen?
 Defekte redundante Hardware erkennen
Festplatten im Raid Verbund
Netzteile
Netzwerkkarten
...
 Defekte interne Hardware erkennen
Lüfter
Netzteile
...
 Weitere Problem vorzeitig erkennen
Überhitzung
...

 Open Manage
check_om_chassis.pl
check_om_storage.pl
 Insight Manager
check_compaq_insight.pl
 Server View
check_serverview.py
 Director
NETWAYS eventdb
snmptraps
 Individuelle Server
?
Hardwareüberwachung – Status quo

IPMI
Vorstellung

IPMI Definition 1
Intelligent Platform Management Interface (IPMI) ist eine
Spezifikation, die beschreibt, wie Sensoren eines Systems
erkannt und verwaltet werden.
Zusätzlich spezifiziert IPMI darüber hinaus auch

Power Control

Reset

FRUs (Field Replaceable Units) information

Watchdogs

IPMI Definition 2
Über die Spezifikation hinaus haben Hersteller IPMI zusätzlich
um weitere Bausteine erweitert:
 LED Steuerung
 Character Displays
 HOT-Swapping Komponenten
 ...
oder kurz gesagt: IPMI ist zum „Standardweg“ für die
Hardware Verwaltung geworden.

IPMI Gründer / Versionen
 Initiiert wurde IPMI bereits 1998 durch:
●
Dell
●
HP
●
Intel
●
NEC Corporation
 IPMI existiert in den Versionen:
●
v1.0 vom 16.09.1998
●
v1.5 vom 01.03.2001
●
v2.0 vom 14.02.2004

IPMI Basisaufbau 1
 Management Controllers (MCs)
●
Sensoren
●
Ein-/Ausgabe von angeschlossenen Geräte
●
Sensor Data Records (SDRs)
 Baseboard Management Controller (BMC)
●
externe Schnittstellen zum System

IPMI Basisaufbau 2
 Sensor Data Records (SDRs) enthalten detailierte
Informationen über Entities
●
Name
●
FRU Informationen
●
welche weiteren Entities überwacht werden
 Entities sind die eigentlichen physikalischen Objekte eines
Systems (Boards, CPUs, Lüfter, Netzteile, ...). An sie sind die
eigentlichen Sensoren angeschlossen.

IPMI Kanäle zur BMC
 Lokales Interface – direkt zur CPU: „System Interface“
 Externe Interface
Seriell / Modem
Über das Netzwerk: „LAN Interface“
unabhängig vom Betriebssystem
immer aktiv
Verschlüsselung möglich

IPMI
Integration

IPMI Module
/etc/modules:
ipmi_si
ipmi_devintf
ipmi_watchdog
ipmi_poweroff
dmesg:
IPMI System Interface driver.
ipmi_si: Trying SMBIOSspecified kcs state ...
ipmi: Found new BMC (man_id: 0x0028c5, ...
IPMI kcs interface initialized
ipmi device interface
IPMI Watchdog: driver initialized
IPMI poweroff: ATCA Detect mfg 0x28C5 prod 0x4
IPMI poweroff: Found a chassis style poweroff function

IPMITool 1
 Debian:
apt-get install ipmitool
 RedHat:
yum install ipmitool
 Kanäle:
 0 = System Interface
 1 = LAN Interface

IPMITool 2
 Netzwerk:
/usr/bin/ipmitool -I open lan set 1 ipaddr 10.10.1.230
/usr/bin/ipmitool -I open lan set 1 defgw ipaddr 10.10.1.1
/usr/bin/ipmitool -I open lan set 1 netmask 255.255.255.0
/usr/bin/ipmitool -I open lan set 1 access on
 Zugriff:
/usr/bin/ipmitool -I open lan set 1 snmp SNMPCOMMUNITY
/usr/bin/ipmitool -I open lan set 1 password NullPasswort
/usr/bin/ipmitool -I open user set password 2 RootPassword
 Konfigurationscheck:
/usr/bin/ipmitool -I open lan print 1

IPMITool 3
Set in Progress         : Set Complete
Auth Type Support       : NONE MD2 MD5 PASSWORD
Auth Type Enable        : PASSWORD
IP Address Source       : BIOS Assigned Address
IP Address              : 10.10.1.230
Subnet Mask             : 255.255.255.0
MAC Address             : e6:b3:c9:42:fe:18
SNMP Community String   : *****
IP Header               : TTL=0x40 Flags=0x40 Precedence=0x00 TOS=0x10
BMC ARP Control         : ARP Responses Enabled, Gratuitous ARP Enabled
Gratituous ARP Intrvl   : 8.0 seconds
Default Gateway IP      : 10.10.1.1
Default Gateway MAC     : 00:04:23:a9:6d:e2
Backup Gateway IP       : 0.0.0.0
Backup Gateway MAC      : 00:00:00:00:00:00
RMCP+ Cipher Suites     : 0,1,2,3,6,7,8,11,12
Cipher Suite Priv Max   : uuuOXXuuOXXuOXX

IPMI
und Nagios

Aktive Checks 2
 Plugin: check_ipmi.pl (siehe Links)
use warnings;
use strict;
open IPMI, "ipmitool I lan ".join(" ",@ARGV)." sdr |" or
die "ipmitool: $!";
my %found;
my %bad;

Aktive Checks 3
 Command
define command{
        command_name  check_ipmi
        command_line  $USER1$/check_ipmi.pl U $USER10$
                      P $USER11$ H $HOSTADDRESS$
        }

Aktive Checks 4
 Service
define service{
        use                             genericservice
        host_name                       ipmihost
        service_description             IPMI
        check_command                   check_ipmi
        }

Aktive Checks 5

Aktive Eventhandler 1
 ipmitool als Grundlage:
~# ipmitool chassis power
chassis power Commands: status, on, off, cycle, reset, diag,
soft
~# ipmitool chassis power status
Chassis Power is on
...

 Host
define host{
        use                     generichost
        host_name               ipmihost
        address                 10.10.1.230
        event_handler resetserver
        }

 Command
define command{
command_name  resetserver
command_line  $USER2$/resetserver
              $HOSTSTATE$ $HOSTSTATETYPE$
              $HOSTATTEMPT$ $HOSTADDRESS$
              $USER10$ $USER11$
}

 reset-server Skript
#!/bin/sh
case "$1" in
  CRITICAL)
    case "$2" in
      SOFT)
        case "$3" in
          3)
echo n "Reseting Server"
/usr/bin/ipmitool I lan H $4 U $5 P $6
   chassis power reset
;;
...

IPMI
noch mehr...

Ideen und Hinweise mit IPMI
 I: Optimierung der Temperaturen in einem Rack
 I: „Offline“ Backups
 I: „Last-dynamische“ Cluster
 H: IPMI Authentifizierung prüfen!
 H: Möglichst Verschlüsselung einschalten!
 H: IPMI Cards Feature checken!

BMC unter Linux
dmesg:
usb 57: new high speed USB device using ehci...
usb 57: configuration #1 chosen from 1 choice
scsi30 : SCSI emulation for USB Mass Storage devices
usbstorage: device found at 30
usbstorage: waiting for device to settle ...
input: Peppercon AG Multidevice as /class/input/input63
input: USB HID v1.01 Mouse [Peppercon AG ...
input: Peppercon AG Multidevice as /class/input/input64
input: USB HID v1.01 Keyboard [Peppercon ...
scsi 30:0:0:0: DirectAccess ..
sd 30:0:0:0: Attached scsi removable disk sdb
sd 30:0:0:0: Attached scsi generic sg2 type 0
usbstorage: device scan complete

KVM / Powerswitch

weiterführende Links
 Intel Homepage
http://www.intel.com/design/servers/ipmi/
 Nagios Plugin
http://www.nagiosexchange.org
http://www.qwirx.com/check_ipmi
 IPMITool
http://ipmitool.sourceforge.net/
 Linux Kernel
http://www.kernel.org/doc/Documentation/IPMI.txt

weitere Fragen?
Vielen Dank!

Nagios Conference 2007 | Hardwareüberwachung IPMI by Gerd Müller

Empfohlen

Empfohlen

Weitere ähnliche Inhalte

Ähnlich wie Nagios Conference 2007 | Hardwareüberwachung IPMI by Gerd Müller

Ähnlich wie Nagios Conference 2007 | Hardwareüberwachung IPMI by Gerd Müller (20)

Nagios Conference 2007 | Hardwareüberwachung IPMI by Gerd Müller