障害発生時に抑えておきたい基礎知識
•
21 gefällt mir•2,169 views
NODE-Setagaya#0 ( http://www.zusaar.com/event/650010 ) の発表＆ディスカッションをした際に使った資料です。
Empfohlen
Weitere ähnliche Inhalte
Was ist angesagt?
Was ist angesagt? (20)
Andere mochten auch
Andere mochten auch (20)
Ähnlich wie 障害発生時に抑えておきたい基礎知識
Ähnlich wie 障害発生時に抑えておきたい基礎知識 (20)
Mehr von Kei IWASAKI
Mehr von Kei IWASAKI (10)
障害発生時に抑えておきたい基礎知識
- 2. Profile • 名前 Kei Iwasaki • Twitter @laugh_k • 職業 MSP(監視運用代行)の会社で サーバ・ネットワークエンジニア的なもの
- 3. 3月某日のこと
- 5. 参加してきました！
- 8. 障害発生時の基本確認編
- 11. 障害発生時の基本確認編 聞き耳を立てているポート・プロセスはないか？ ※プロセスの情報もセットで追いかける場合は rootで実行する。 # netstat -nplt # netstat -nplu # netstat -nplx
- 12. 障害発生時の基本確認編 CPU、MEMなどのシステムリソースは どうなっているか？ Mem # free -m Load Average(CPU) # uptime # free -m # uptime
- 13. 障害発生時の基本確認編 CPU、MEMなどのシステムリソースは どうなっているか？ 入っていたら # sar -A 現状のプロセスと照らし合わせながら # top ※topは表示中にfを押すと詳細な表示オプションが 選択できる！ # sar -A # top
- 14. 障害発生時の基本確認編 何かシステムがエラーを吐いていないか？ システムログの確認 ※ /etc/rsyslog.conf,/etc/syslog.confを確認すると 他にもどこかに吐かれていることがわかる！ # dmesg # less /var/log/messages # less /var/log/syslog # less /var/log/secure # less /var/log/auth
- 15. 障害発生時の基本確認編 何かバッチ処理が動いていないか？ Cronの確認 ※ cronは管理者によって書き方が色々なので注意！ # ls /var/spool/cron/crontab/* # cat /etc/crontab # ls /etc/cron* ## /etc/cron* のファイルを全部表示 # find /etc/cron* -type f -exec cat '{}' ;
- 16. 障害発生時の基本確認編 何かバッチ処理が動いていないか？ atコマンドジョブの確認 # atq # at -c [ジョブ番号] # atq | awk '{print $1}' | xargs at -c ※ 「トラしゅ」ではこいつに苦しめられましたね。。 # atq # at -c [ジョブ番号] ## 一行で確認 # atq | awk '{print $1}' | xargs at -c
- 17. 障害発生時の基本確認編 ミドルウェアは何が入っている？ 必ずしもyumやaptで行儀よく入っているとは 限らない ※ ソースコンパイルでインストールする際は /usr/local/[ミドルウェア名] に突っ込むことが多い。というかほぼ暗黙の了解。 また、モノによっては /opt配下も好まれる場合もあり # ls /usr/local # ls /opt
- 18. 障害発生時の基本確認編 ミドルウェアのログを見よう！ 単純にエラーを探すだけでなく、 タイムスタンプが不自然に切れていないかなども重要 Apacheだと大体はこんな感じ ※vimが入っている場合はハイライトが効いて 見やすくなることもある。 ## yumやaptなどの場合 # less /var/log/apache2/access.log ## ソースコンパイルの場合 # less /usr/local/apache2/logs/access.log
- 19. 障害発生時の基本確認編 自動起動しているプロセスはあってる？ 意図しているもの 今起動しているもの ※ちゃんと意図したとおりに動いているのか確認 # chkconfig –list # cat /etc/rc.local # ls /etc/rc{1..5}.d/ # ps auxwww # pstree -p