【Hinemos World 2013】C-3：Hinemos4.1で進化したジョブ機能の全て（株式会社NTTデータ）

Hinemos World 2013

Hinemos4.1で進化したジョブ機能のすべて
2013年11月15日
株式会社NTTデータ基盤システム事業本部
眞野将徳

Copyright © 2013 NTT DATA Corporation

ＩＮＤＥＸ
1. Hinemosとは
2. Hinemosのジョブ管理機能
3. ジョブ管理機能による負担軽減
4. まとめ


2

1. Hinemosとは


3

Ｈｉｎｅｍｏｓとは
システム運用管理で要求される各種機能を備えた、
「統合運用管理ソフトウェア」

リポジトリ管理

監視管理

ジョブ管理

性能管理

複雑化するシステムを、Hinemosで統合運用管理

物理環境


仮想化環境

ネットワーク機器類

4

Ｈｉｎｅｍｏｓの歩み
New メジャーバージョンリリース
 ジョブ管理の進化
 クラウド対応へ向けた監視・性能管理の強化

Hinemos
v.2.0 （2006.03）
v.2.1 （2006.10）
Hinemos
v.1.0 （2005.08） v.2.2 （2007.03）
v.2.3 （2007.10）
v.2.4 （2008.03）


Hinemos
v.3.0 （2008.10）
v.3.1 （2009.04）
v.3.2 （2010.09）

1年半に1度の
メジャーバージョンアップサイクル

Hinemos
v.4.1

2013.10.01
Hinemos
v.4.0 （2012.04）リリース！

5

Hinemos4.1のジョブ管理機能性能 NEW!!
■ 登録できるジョブ数

10万件！！
■ ジョブの登録速度
Hinemos4.0に比べて大幅な改善
登録時間
- Hinemos4.0 → 全ジョブを上書き
- Hinemos4.1 → 差分だけを登録


6

Hinemosのジョブ
 Hinemosのジョブはクラウド環境を含む様々な環境で実行可能

プライベートクラウド上のシステム

パブリッククラウド上のシ
ステム

オンプレミス環境
プライベートクラウド
仮想化集約基盤


7



8


1. ジョブ管理の重要性
1. ジョブを構築する機能
2. ジョブを実行する機能
3. 実行結果を確認する機能


9

複雑化するシステムオペレーション
 システムの利便性が高まる一方、システム運用者の負担は増加

・システム運用操作が複雑化、高度化し、操作の影響範囲も拡大
・システム提供形態の変化による、運用管理者のタスクも増加
・システム運用操作が可能な時間もより限定的に

システム運用管理作業の負担軽減が必要

10

運用管理におけるジョブ管理の負担
 運用管理者の負担となる処理

 負担となる処理はフェーズごとに存在
ジョブの構築


ジョブの実行

実行結果の確認

11

Hinemosのジョブ管理機能
■ Hinemosのジョブ管理機能では、以下を提供します
複雑なジョブ構造を簡単に構築する機能
さまざまな契機でジョブを実行する機能
ジョブの実行結果を容易に確認する機能


12

①複雑なジョブ構造を簡単に構築する機能


13

ジョブ定義情報の集約管理
 ジョブの定義情報はHinemosマネージャで一括管理します
...
コマンド
スケジュール

...
...

実行状態

コマンド
スケジュール
コマンド
スケジュール

...

実行結果

実行結果
実行状態

Hinemosマネージャ

実行結果
実行状態

コマンド
スケジュール

実行結果
実行状態

コマンド

...

コマンド

...

実行状態

スケジュール

実行状況

実行結果

スケジュール

実行結果

コマンド

実行結果

スケジュール

実行状態


14

Hinemosのジョブ機能を支える要素
■ Hinemosのジョブ管理機能を構成するシンプルな5つの要素
ジョブユニット
・・・ジョブ階層の最上位要素
ジョブネット
・・・複数のジョブをグルーピング
ジョブ
・・・最小の実行単位
ファイル転送ジョブ・・・他サーバへファイルを送信
参照ジョブ NEW!! ・・・定義済みジョブの別のジョブネットから利用
ジョブユニット

ジョブネット
参照ジョブ

ジョブ

ジョブネット
ファイル転送ジョブ


ジョブ

15

実行条件の制御
 ジョブは、細やかな実行条件が定義可能
 「先行ジョブの実行結果」や、「時刻」で、複雑なジョブ構造を思いのままに制御
ノードＡ

先行ジョブの正常
終了を契機とした
ジョブ起動

ノードＡ

ノードＡ

Job1

Job2-1
Job2-2

先行ジョブの異常
終了を契機とした
ジョブ起動


Job2-1の終了を
契機とした複数
ジョブの同時実行

Job2-1の正常終了
と時刻契機によるジョ
ブネット起動

Job3-1
ノードB

Job3-2

先行ジョブの実行結果
に依らず終了を契機と
したジョブ起動

ノードB

Job4-1
複数ジョブの終了
を契機としたジョブ
の実行

Job4-2

16

ジョブ実行時の制御
 保留・スキップにより、ジョブ実行時の挙動を指定
ジョブを開始させない

コマンドを実行せず終了

保留

スキップ

×

Job

Job

保留

スキップ

 開始遅延、終了遅延を判定し、動作遅延も見逃しません！！
予定時刻に開始しない
開始遅延
Job

開始遅延


予定時刻に終了しない
終了遅延
Job

終了遅延

17

②さまざまな契機でジョブを実行する機能


18

毎日コマンド入力しますか？
■ 複雑なコマンドを手動実行することは運用者の大きな負担

実行漏れ

失敗時の
代替処理


入力ミス

実行結果の
保存

19

実行契機
 ジョブは、４種類の任意の契機で実行することが可能
即時実行
（手動実行）
ジョブ実行
スケジュール実行
（定期実行）

スケジュール

NEW!!
カレンダ

監視結果

障害


ファイルチェック

ファイル
（作成、変更、削除）

20

業務に沿ったジョブの実行 NEW!!
■ 業務スケジュールに合わせた詳細なカレンダ設定が可能
(例) 2013年11月15日の13:00～17:00 を稼働とする
毎月20日を非稼働とする
毎週水曜日を稼働とする
第4月曜日の3日後を稼働とする
規則的な日程のみでは
実現困難な不規則な日程
毎月月末を稼働とする
(営業日など)を
祝日を稼働とする
ユーザが自由に定義可能!!
■ ジョブの実行スケジュールも詳細に設定可能
(例) 毎日15:00 にジョブを実行
毎時30分にジョブを実行
毎週日曜日の22:00 にジョブを実行
5分ごとにジョブを実行
※稼働 : ジョブや監視が動作する時間帯

21

多重度実行制御 NEW!!
 エージェント毎に同時に実行するジョブの数に制限が可能
＜多重度を4とした場合＞
1つのHinemosエージェントに対して
同時実行できるジョブ数が「４」となる

ジョブ実行依頼

Hinemos
マネージャ

Hinemos
エージェント

Wait


Wait



Wait

エージェントごとに設定可能

22

実行される予定のジョブの確認 NEW!!
■ ジョブ[スケジュール予定]ビューで、
将来実行されるジョブを確認することができます

フィルタによる絞り込みも可能


23

③ジョブの実行結果を容易に確認する機能


24

ジョブ実行状況の確認
 ジョブとして実行された各種運用操作の結果は、
HinemosのGUIで視覚的に確認可能

ジョブネット・ジョブの
実行状態を確認

後続ジョブが動く
条件を線の色で判断

正常、異常終了を
ボックスの色で判別

詳細情報の表示

ビューア画面から
再実行操作が可能


25

ジョブ実行結果の通知
 ジョブの結果は、様々な手段で運用者に通知
Ja n 13 11:35:20 server01 su: pam_unix(su-l:session): session opened for user root by hinemos(uid=501)
Ja n 13 15:51:02 server01 su: pam_unix(su-l:session): session closed for user root
Ja n 13 15:51:04 server01 su: pam_keyinit(su-l:session): Unable to change UID back to 0
Ja n 13 15:51:04 server01 su: pam_unix(su-l:session): session closed for user hinemos
Ja n 13 20:40:05 server01 su: pam_unix(su-l:session): session opened for user root by hinemos(uid=500)

ログエスカレーション通知

メール通知

ステータス通知

ジョブ通知
パトライト
点灯コマンド

イベント通知

コマンド通知

Hinemosマネージャ
クライアント画面で
視覚的に確認
 イベント通知
 ステータス通知


監視結果を外部へ通知
 メール通知
 ログエスカレーション通知

監視結果に連動して
処理実行
 ジョブ通知
 コマンド通知

26

ジョブ実行結果の通知内容の確認
 日々の定型業務の結果の確認も容易に行えます
開発環境
Ｈｉｎｅｍｏｓマネージャ

ログ管理ジョブネット
毎日23:45に
自動実行

ログファイル
圧縮ジョブ

ログファイル
転送ジョブ

完了通知

詳細情報を確認
実行履歴を蓄積管理


27

3. ジョブ管理機能による負担軽減


28

ケース1 定期実行


29

■ 業務サーバのデータをバックアップしたい
22時になったら自動で開始したい
翌日5時半までに終了しないと翌日の業務に影響が出るので
5時になっても処理が終わらない場合は終了させたい

処理開始

22時

タイムリミット

5時
30

■ 1. まずはバックアップジョブを作成しましょう
ジョブパースペクティブ

ジョブを実行する
サーバ

実効コマンドを
設定

ジョブの作成
を選択


31

■ 2. 終了遅延で、ジョブの終了時間を監視できます！！

終了遅延の判定条件

判定時の処理


32

■ 3. 毎日22時に実行するようにスケジュール設定しましょう

作成したジョブを
毎日22時に
スケジュール設定
選択

スケジュール作成
を選択
毎日22時に
スケジュール設定

33

ケース1 定期実行(補足) NEW!!
■ Hinemos4.1では、時刻設定が48時間対応しています！！

待ち条件
ジョブスケジュール

開始遅延/終了遅延


カレンダ

34

ケース2 月次実行、週次実行、日次実行


35

■ 実行日に応じて、次の三種類のジョブを実行したい
・毎月1日にだけ実行したいジョブ
・毎週月曜日にだけ実行したいジョブ
・それ以外の日に実行したいジョブ
1

月曜

週次実行ジョブ

それ以外

?

月次実行ジョブ

日次実行ジョブ

実行日


36

■ ジョブにカレンダを設定すると
ジョブの稼働・非稼働を制御できます！！
ジョブネット
毎月1日が稼働日のカレンダ


毎週月曜が稼働日のカレンダ

共通処理A


共通処理B

それ以外が稼働日のカレンダ



37

■ 例：11/11 月曜日にジョブネットを実行すると・・・
ジョブネット
毎月1日が稼働日のカレンダ


非稼働日なので
実行しない

毎週月曜が稼働日のカレンダ

共通処理A


共通処理B

それ以外が稼働日のカレンダ
稼働日なので
実行する



非稼働日なので
実行しない

38

ケース2 月次実行、週次実行、日次実行 NEW!!
■ 1. 稼働・非稼働を指定するカレンダを作成しましょう
カレンダパースペクティブ

作成を選択

稼働・非稼働の条件を
追加していきます！

39

■ 2. 稼働・非稼働の条件を設定しましょう！！
毎月1日は稼働とする月次処理用の設定

毎年・毎月の1日は稼働
毎月の1日は稼働


40

■ 規則には複数の詳細設計を追加でき、
複数の詳細設定がある場合は、順序が小さいものから
規則にマッチしているか判定します
■ 日時処理用のカレンダ詳細設定

毎年毎月1日は
非稼働

毎年毎月1日でない
毎週月曜は非稼働

毎年毎月1日でない
毎週月曜でもない
すべての日は稼働

組み合わせると複雑なカレンダ設定も実現可能です！！

41

■ 設定したそれぞれのカレンダ設定も容易に確認できます
毎月1日が非稼働
毎週月曜が稼働
毎月1日が非稼働
毎週月曜が非稼働
それ以外の日が稼働

毎月1日が稼働


42

ケース3 ファイル生成によるジョブ実行


43

■ あるフォルダにマスタファイルが生成されたら
データベースに登録したい

業務サーバ
マスタ
ファイル

lsコマンドの差分を
調べるスクリプトを
定期的に実行する？

マスタ登録
ＤＢサーバ


44


NEW!!

■ 1. まずはマスタ登録ジョブを作成しましょう

ジョブを実行する
サーバ

実効コマンドを
設定

ジョブの作成
を選択


45


NEW!!

■ 2. ファイルが作成されたらジョブを起動するよう
ファイルチェックを設定しましょう
実行するジョブを選択

チェックするファイル名の
指定が可能

チェックするファイル操作の
指定が可能
「ファイルチェック作成」を選択


46

4. まとめ


47

まとめ
Hinemosのジョブ管理機能は
求められるジョブの制御を行うことができ、複雑なジョブ構造を、容易に構
築することができます
柔軟なスケジューリング等さまざまな契機でジョブを実行することができます
ジョブの実行結果を、容易に確認することができ、システム運用の見える化
を実現します


48

【Hinemos World 2013】C-3：Hinemos4.1で進化したジョブ機能の全て（株式会社NTTデータ）

Empfohlen

Empfohlen

Weitere ähnliche Inhalte

Was ist angesagt?

Was ist angesagt? (20)

Andere mochten auch

Andere mochten auch (20)

Ähnlich wie 【Hinemos World 2013】C-3：Hinemos4.1で進化したジョブ機能の全て（株式会社NTTデータ）

Ähnlich wie 【Hinemos World 2013】C-3：Hinemos4.1で進化したジョブ機能の全て（株式会社NTTデータ） (20)

Mehr von Hinemos

Mehr von Hinemos (20)

【Hinemos World 2013】C-3：Hinemos4.1で進化したジョブ機能の全て（株式会社NTTデータ）