RoomScene 3D
ダウンロード

Zabbixを3Dで:障害をハードウェアのある場所に表示する

ZabbixはPO-SRV-04の電源が故障したことを教えてくれます。しかし、そのサーバーが空調機(CRAC)の裏のラックA07、U21にあることは教えてくれません。この記事では、専用ツールの有無にかかわらず、その溝を埋める方法を紹介します。

公開日

Zabbixのマップでできること、できないこと

Zabbixのネットワークマップはトポロジーのために作られています。キャンバスにホストのアイコンを置き、間にリンクを引き、各アイコンが障害に応じて色を変えるようにします。WAN、コアネットワーク、信号チェーンなら、多くの場合それで十分です。

それでもマップは手描きの2Dの絵です。フロア図を背景としてアップロードし、その上にホストのアイコンを置くこともでき、実際にそうしているチームもあります。しかしマップには、部屋、ラック、Uという概念がありません。2台のホストが同じラックにあること、フレームが4Uを占めること、次の2Uの空きがA09 U12にあることを知りません。移設のたびに誰かが手でマップを編集する必要があり、忙しい機器室では、その人が移設を行う本人であることはまれです。

そのため午前3時にトリガーが発報すると、当番の技術者はホスト名を読み、いつ更新されたかわからないスプレッドシートやVisioのラック図を開いて探しに行きます。物理的なビューがこれを解決できるのは、描くのではなく、データから生成する場合だけです。

ホストを物理的な位置に対応付ける

物理的なビューの中核は、位置を持つ機器ごとのレコードです。拠点、部屋、ラック、U、高さです。Zabbixのホストはそのレコードにリンクされます。位置を保持する場所は、主に3つあります。

  • Zabbix自体。ホストのインベントリには設置場所の項目があり、ホストのタグにroom:CAR-1、rack:A07、u:21などの値を持たせることもできます。手軽に始められますが、2台のホストが同じUを主張するのを防ぐ仕組みはなく、パッシブ機器は登録されません。
  • スプレッドシート。よくある出発点です。読むには十分ですが、何かを強制するのは苦手で、ホストが追加されたり名前が変わったりするにつれてZabbixとずれていきます。
  • Zabbixにリンクする資産台帳。位置は機器のレコードとともにあり、ZabbixのホストIDはその属性の1つです。資産台帳には、Zabbixが決して持たないもの、つまりパッチパネル、KVMスイッチ、パッシブスプリッター、ブランクパネルも保持できます。

どれを選ぶにしても、安定したキーでリンクしてください。ホスト名は、誰かが命名規則を整理すると変わりますが、ホストIDは変わりません。名前の一致は最初のリンクを作るには良い方法ですが、リンクを維持するには向きません。

最初の作業ではホストグループが役立ちます。Playout serversやNetwork/Coreのようなグループで、ラックに機器を配置するときの候補を絞り込めますし、機器種別の最初の推定としても妥当です。ただし、グループを設置場所として扱わないでください。ホストは通常いくつものグループに属し、どのグループもそれがどこにあるかは示しません。

最も深刻な未解決の障害で色分けする

Zabbixにはトリガーの深刻度が6段階あります。物理的なビューでも同じ名前と、できれば同じ色を使い、誰も読み替える必要がないようにします。

深刻度典型的な用途ビューでの表示
Not classified(未分類)まだ誰も評価していないトリガー表示する。優先度は最低
Information(情報)知っておくべきだが対応不要なイベント通常は表示。絞り込みで除外されることが多い
Warning(警告)日中に確認すべきもの機器に色を付ける
Average(軽度の障害)サービスの低下、冗長性の喪失機器に色を付け、ラックで件数に含める
High(重度の障害)サービスが今まさに危険機器、ラック、部屋に表示
Disaster(致命的な障害)サービス停止機器、ラック、部屋に表示

有効なルールは単純です。機器は最も深刻な未解決の障害の色になります。ラックは機器の中で最も深刻な色に、部屋はラックの中で最も深刻な色になり、件数も表示します。この集計があれば、A07の電源1台のHighが、部屋を開く前に拠点の全体表示から見えます。

色が信頼されるかどうかは、いくつかの細部で決まります。

  • 無効化されたホストとトリガー。その障害は除外します。ハードウェア交換のために無効化したホストが、1週間ラックを赤く塗り続けるべきではありません。
  • メンテナンス。Zabbixはメンテナンス期間中の障害を抑制できます。抑制された障害で機器に色を付けるかを決め、その選択がわかるようにしておきます。
  • 確認済みの障害。確認済みでも未解決のままです。多くのチームは色を残し、機器のカードに確認済みであることを表示します。
  • 絞り込み。夜勤が使うのは、High未満をすべて隠す深刻度カウンターです。絞り込みで色が隠れていても、件数は表示してください。
  • 古いデータ。Zabbixからの最後の読み取り成功が20分前なら、そう表示します。切れた接続からの緑は、色がないよりも悪い状態です。

読み取り専用の接続

可視化に必要なのは、ホスト、ホストグループ、障害、そしていくつかのアイテムの読み取りだけです。何かを書き込めてはいけません。Zabbix 5.4以降のAPIはトークンに対応しているので、ユーザーのパスワードを別のシステムに保存せずに済みます。

  1. タイプがUserのユーザーロールを作成し、Zabbixのバージョンが許す場合は、APIアクセスをツールに必要なメソッドに限定します。
  2. ビューに表示するホストグループに対してRead(読み取り)権限だけを持つユーザーグループを作成します。
  3. そのグループに、そのロールを持つ専用のユーザーを作成します。個人のアカウントを流用しないでください。
  4. そのユーザーのAPIトークンを、セキュリティポリシーが許容する有効期限で生成します。
  5. テストします。トークンから見えるホスト数が想定と一致するはずです。少ない場合、たいていはホストグループの権限が不足しています。

PDUからの電力と温度

計測機能付きのPDUや環境センサーの多くは、SNMPテンプレートですでにZabbixに登録されています。適切なアイテムを選べば、それらで部屋の電力と温度のビューを作れます。

  • 単位。電力のアイテムはWまたはkW、温度は°Cで届きます。合計する前に単位をそろえます。
  • 合計と各相。三相のPDUは、合計、各相の値、またはその両方を報告することがあります。合計があればそれを使い、なければ各相を合計します。両方を足すとラックの値が2倍になるので、決して足さないでください。
  • 無視するもの。コンセント別の読み取り値、定格容量、ピーク値は、それ自体は有用ですが、ラックの合計に入れてはいけません。
  • 電流のみ。アンペアしか報告しないPDUもあります。電圧と電流の積は皮相電力(VA)であり、有効電力(W)ではありません。そのように表示してください。
  • A系統とB系統。ラックの負荷は両方のPDUの合計です。各系統がその合計を単独で賄えなければ、1系統を失うとラックが停止します。例:230 V、単相16 AのPDU 2台はそれぞれ約3.7 kVAなので、2.4 kWのラックならどちらの系統でも余裕がありますが、4.5 kWのラックはそうではありません。
  • 温度。ラック前面の吸気センサーを使います。背面の排気の値は設計上ずっと高く、ヒートマップで誤警報を招きます。

突合と、Zabbixから見えない機器

資産台帳とZabbixをリンクすると、2つの一覧が作れるようになります。どちらも毎週確認する価値があります。

  • 資産台帳にレコードのないZabbixホスト。監視には追加されたのに、どこに設置したかを誰も記録していないものです。仮想ホストであることが多く、開局のために届いて文書化されなかったサーバーのこともあります。
  • Zabbixホストのない資産台帳上の機器。監視の設定を忘れたか、監視できない機器です。

2つ目の一覧には3つ目の状態が必要です。放送局の機器室は、管理インターフェースを持たない機器であふれています。パッシブのパッチパネル、SNMP非対応の分配増幅器、古いフレーム、KVMエクステンダー。これらは監視対象外としてマークします。そうしないと、正常に見える(これは事実と異なります)か、欠落リストにずっと残り続ける(これはリストを無視する習慣を生みます)かのどちらかになります。

RoomScene 3Dでの実現方法

RoomScene 3Dはこの方法を中心に作られています。各部屋は資産台帳から描かれる3Dモデルで、すべての機器がそのUの位置にあります。読み取り専用のAPIトークンでZabbixに接続し、開始時に名前でホストをリンクし、残りはホストグループで絞り込める未配置リストに入れます。未解決の障害は機器をZabbixの深刻度の色で表示し、ラックは機器の中で最も深刻な色で発光し、部屋の一覧には件数が表示されます。無効化されたホストとトリガーの障害は表示しません。詳細はZabbixを3Dでのページにあります。

PDUの合計値(合計がない場合は各相の合計)を2分ごとにWまたはkWで読み取り、吸気温度と室温も°Cで読み取ります。これらは電力と温度のヒートマップ、A/B系統のビューに使われます。突合機能は、Zabbixにあって資産台帳にないもの、またその逆を一覧にし、監視できない機器は「not monitorable」とマークできます。Zabbixにない機器には、代わりに内蔵のpingまたはTCPチェックを使えます。

現在、機器一覧がExcelにあるなら、Excelの資産台帳を3Dモデルにするで取込を解説しています。放送設備がインフラ管理ソフトウェアに何を求めるかという広い問いについては、放送設備のDCIM、またはラック図のページをご覧ください。30日間の試用版は全機能を使えます。テスト用のZabbixと1部屋で試してください。

自社の部屋で試してください

RoomScene 3Dは全機能を使える30日間の試用版です。テストサーバーにインストールし、1部屋分を取り込んでみてください。

30日間の試用版をダウンロード 見積を依頼

contact@roomscene3d.com · tahirfeyzioglu@gmail.com