FUJITSU Server PRIMEQUEST 1000シリーズクラスタ構成設 …シリーズにおけるRHEL5 およびRHEL6 の環境で、PRIMECLUSTER を使用したクラスタシステムを設計する際に必要となるネットワーク、共用I/O

FUJITSU Server PRIMEQUEST 1000 シリーズ

クラスタ構成設計ガイド

（Linux/PRIMECLUSTER 編）

富士通株式会社

C122-A007-05

PRIMEQUEST 1000 シリーズクラスタ構成設計ガイド（Linux/PRIMECLUSTER 編）

はじめに本書は、PRIMEQUEST 1000 シリーズにおける RHEL5 および RHEL6 の環境で、PRIMECLUSTER

を使用したクラスタシステムを設計する際に必要となるネットワーク、共用 I/O 装置の情報、構成につ

いて説明しています。

PRIMEQUEST 1000 シリーズは、QPI（Quick Path Interconnect）ネットワークとメモリミラー機能

をあわせ持ち、さらにパーティション機能、Reserved SB 機能（*）などにより高信頼なシステムを構

築できる基幹 IA サーバです。

PRIMEQUEST 1000 シリーズに関する基本的な情報は、『PRIMEQUEST 1000 シリーズ構成設計ガ

イド』を参照してください。

（*）Reserved SB 機能については「付録 Reserved SB 機能」を参照してください。

PRIMEQUEST 1000 シリーズにクラスタシステムを採用することで、OS、ミドルウェア、アプリケー

ションの障害発生にまで対応し、さらに高可用な運用が可能になります。

略称

本書では、製品名を以下のように表記しています。

製品名、部品名略称

PRIMEQUEST 1400S

PRIMEQUEST 1000 シリーズ、または PRIMEQUEST

PRIMEQUEST 1400E PRIMEQUEST 1400L PRIMEQUEST 1800E PRIMEQUEST 1800L PRIMEQUEST 1400S2 PRIMEQUEST 1400E2 PRIMEQUEST 1400L2 PRIMEQUEST 1800E2 PRIMEQUEST 1800L2 Red Hat® Enterprise Linux® 5 (for Intel64) RHEL5

Linux、RHEL Red Hat® Enterprise Linux® 5 (for x86) Red Hat® Enterprise Linux® 6 (for Intel64) RHEL6 Red Hat® Enterprise Linux® 6 (for x86) VMware vSphere® 4 VMware VMware vSphere® 5 システムボード SB マネジメントボード MMB PRIMEQUEST Server Agent PSA ServerView Mission Critical Option SVmco Network Interface Card NIC

Copyright 2010-2014 FUJITSU LIMITED

1


関連ドキュメント

クラスタ構成設計を行う際に必要に応じて参照してください。

名称略称

PRIMECLUSTER 導入運用手引書（Linux 版） PRIMECLUSTER 導入運用手引書

PRIMECLUSTER コンセプトガイド（Oracle Solaris／Linux 版）

―

PRIMECLUSTER Cluster Foundation 導入運用手引書（Linux 版）

―

PRIMECLUSTER RMS 導入運用手引書（Oracle Solaris／Linux 版）

―

PRIMECLUSTER RMS リファレンスガイド（Oracle Solaris／Linux 版）

―

PRIMECLUSTER Web-Based Admin View 操作手引書 ― PRIMECLUSTER Global Link Services 説明書（伝送路二重化機能編）（Linux 版）

―

PRIMECLUSTER Global Disk Services 説明書（Linux 版） PRIMECLUSTER Global Disk Services 説明書

PRIMECLUSTER Global File Services 説明書（Linux 版） ― PRIMECLUSTER 活用ガイド＜クラスタ構築・運用時の留意点＞

（Oracle Solaris／Linux 版） ―

PRIMECLUSTER 活用ガイド＜トラブルシューティング編＞


PRIMECLUSTER 活用ガイド＜メッセージ集＞（Oracle Solaris／Linux 版）

―

PRIMECLUSTER 活用ガイド＜コマンドリファレンス編＞


PRIMECLUSTER Wizard for Oracle 導入運用手引書 ― PRIMEQUEST1000 シリーズ ServerView Mission Critical Option ユーザマニュアル SVmco ユーザマニュアル

PRIMEQUEST 1000 シリーズ Linux ユーザーズマニュアル Red Hat Enterprise Linux 5 編 Linux ユーザーズマニュアル PRIMEQUEST 1000 シリーズ Linux ユーザーズマニュアル Red Hat Enterprise Linux 6 編 PRIMERGY シリーズ PRIMEQUEST 1000 シリーズ Linux ユーザーズマニュアル Red Hat Enterprise Linux 5 編（SupportDesk サービスご契約者様向け）（*1） Linux ユーザーズ

マニュアル（SDK）

（*2）

PRIMERGY シリーズ PRIMEQUEST 1000 シリーズ Linux ユーザーズマニュアル Red Hat Enterprise Linux 6 編（SupportDesk サービスご契約者様向け）（*1） PRIMEQUEST(1000 シリーズ)RHEL5-Xen 仮想マシン機能ユーザーズマニュアル

RHEL5-Xen 仮想マシン機能ユーザーズマニュアル

PRIMEQUEST(1000 シリーズ)RHEL5-Xen 仮想マシン機能ユーザーズマニュアル（SupportDesk サービスご契約者様向け）（*1）

RHEL5-Xen 仮想マシン機能ユーザーズマニュアル（SDK）

VMware vSphere 4 ソフトウェア説明書 ― VMware vSphere 4.1 ソフトウェア説明書 ― VMware vSphere 5 ソフトウェア説明書 ― VMware vSphere 5.1 ソフトウェア説明書 ― PRIMEQUEST 1000 シリーズシステム構成図 ―


2


名称略称

PRIMEQUEST 1000 シリーズ製品概説製品概説 PRIMEQUEST 1000 シリーズ導入マニュアル導入マニュアル PRIMEQUEST 1000 シリーズ運用管理マニュアル運用管理マニュアル PRIMEQUEST 1000 シリーズ構成設計ガイド構成設計ガイド

（*1）参照するには SupportDesk 契約が必要です。

（*2）本書で特に断りがない箇所は、『Linux ユーザーズマニュアル』に含まれます。

商標

Linuxは、Linus Torvalds氏の登録商標です。

Red Hatは米国およびそのほかの国において登録されたRed Hat,Inc.の商標です。

VMwareおよびVMwareの製品名は、VMware, Inc.の米国およびその他の国における登録商標または

商標です。

Intel は、アメリカ合衆国および/またはその他の国におけるIntel Corporationの商標です。

OracleとJavaは、Oracle Corporationおよびその子会社、関連会社の米国およびその他の国における

登録商標です。

NetVaultは、米国およびその他の国におけるDell, Inc.の登録商標です。

PRIMECLUSTERは、富士通株式会社の登録商標です。

その他、会社名と製品名はそれぞれ各社の商標、または登録商標です。


3


目次

はじめに .......................................................................................................................... 1

1 PRIMEQUEST 1000 シリーズにおけるクラスタシステムの構築 ................... 6 クラスタシステムによる信頼性向上 ...................................................................... 6 1.1 クラスタ構成 .......................................................................................................... 8 1.2

1.2.1 筐体間クラスタ（推奨） ................................................................................. 8 1.2.2 筐体内クラスタ ............................................................................................... 8 1.2.3 サポート構成 ................................................................................................... 9 PRIMECLUSTER によるクラスタシステム ....................................................... 11 1.3

2 ネットワーク ......................................................................................................... 13 ネットワークの種類 ............................................................................................. 13 2.1 管理 LAN のクラスタ運用（パーティションの管理 LAN） ................................ 14 2.2 クラスタインタコネクト ...................................................................................... 15 2.3

2.3.1 ネットワーク機器 .......................................................................................... 15 2.3.2 クラスタインタコネクトの構成 .................................................................... 15 ネットワーク構成例 ............................................................................................. 16 2.4

3 共用 I/O 装置.......................................................................................................... 18 外部ディスク装置 ................................................................................................. 18 3.1 テープ装置 ........................................................................................................... 18 3.2 共用 I/O 装置の接続 ............................................................................................. 19 3.3

3.3.1 外部ディスク装置の接続 ............................................................................... 19 3.3.2 テープ装置の接続 .......................................................................................... 21

4 バックアップ／リストア ..................................................................................... 22 システムボリュームのバックアップ／リストア .................................................. 22 4.1 データボリュームのバックアップ／リストア ...................................................... 23 4.2

5 仮想環境でのクラスタ構成 ................................................................................. 25 仮想マシン機能を使用したクラスタ構成の種類 .................................................. 25 5.1

5.1.1 管理 OS が 1 つの場合 ................................................................................... 26 5.1.2 管理 OS が複数の場合 ................................................................................... 27 信頼性の比較 ........................................................................................................ 29 5.2

6 留意事項 ................................................................................................................. 30 PRIMEQUEST 1000 シリーズの留意事項 .......................................................... 30 6.1 PRIMECLUSTER の留意事項............................................................................. 31 6.2


4


付録 ................................................................................................................................ 32

改版履歴 ........................................................................................................................ 33

使用条件 ........................................................................................................................ 34


5


1 PRIMEQUEST 1000 シリーズにおけるクラスタシステムの構築

PRIMEQUEST 1000 シリーズにおけるクラスタシステムの構築について説明します。

クラスタシステムによる信頼性向上 1.1クラスタシステムとは、1 台のサーバでは救済できないソフトウェア異常やハードウェア異常による業

務停止を、複数台のサーバを利用して冗長化することにより救済するシステムです。ソフトウェア（OS、

ミドルウェア、アプリケーション）を含めたシステム全体の可用性を高めます。

PRIMEQUEST 1000 シリーズが適用される基幹系システムの一層の高信頼・高可用実現のために、ク

ラスタシステムの導入を推奨します。

クラスタの運用形態の例を以下に示します。

運用ノードに対して待機ノードを用意します。運用ノードが故障しても業務の継続が可能な、冗長性の

高い構成です。

図 1.1 2 ノードの運用待機の例

クラスタシステムと Reserved SB 組込みの比較を以下の表に示します。ご利用の業務に合わせて、最適

な方法を選択してください。

表 1.1 クラスタシステムと Reserved SB 組込みの比較

項目クラスタシステム Reserved SB 組込み

ハード

障害 CPU

○ △ メモリ

ソフト

障害

OS

○ × ミドルウェアアプリケーショ

ン

まとめ待機系への切替えにより、ハー

ド障害時／ソフト障害時も業務

継続

SB 障害時の迅速な業務再開、

クラスタ構成時に併用すると

クラスタ待機系の早期復旧が

可能

○: 待機系に切替え業務継続 △: 該当パーティションのリブート後に業務継続 ×: 業務停止


6


参考：Reserved SB の組込みによる待機系の早期復旧

クラスタ構成時に Reserved SB を活用することで、SB または CPU、メモリに故障が発生した場合

でも運用待機状態への復旧時間を大幅に短縮させることができます。

運用ノードの SB にハードウェア故障が発生した場合、クラスタ切替えが発生し待機ノードが運用ノ

ードに切り替わることで、業務の継続を可能にしています。一方、SB のハードウェア故障が発生し

た運用ノードは待機ノードとなり、そのパーティションは停止状態となります。

あらかじめ Reserved SB を設定しておくことで、停止したパーティションを再起動して自動的に故障

した SB を切り離し、Reserved SB を組み込んで待機ノードとして起動します。

これにより、待機系の早期復旧が可能となります。

図 1.2 クラスタ構成時の Reserved SB 組込み


7


クラスタ構成 1.2PRIMEQUEST 1000 シリーズのクラスタシステムは、複数筐体間でクラスタシステムを構成する筐体

間クラスタと、1 台の筐体内の複数パーティションでクラスタシステムを構成する筐体内クラスタの 2

つがあります。

仮想環境でのクラスタシステムの構成については、「5 仮想環境でのクラスタ構成」を参照してくださ

い。

1.2.1 筐体間クラスタ（推奨）

筐体間クラスタは、パーティションを 1 つのノードとして扱い、そのノードを筐体間でクラスタ構成

します。筐体異常時の冗長性、筐体分離による保守性の向上などのメリットがあります。

複数の筐体で同じ動作をさせるため、筐体内クラスタと比較して冗長度が高く、信頼性が向上します。

図 1.3 筐体間クラスタ

1.2.2 筐体内クラスタ

筐体内クラスタは、1 台の筐体内の複数のパーティション間でクラスタシステムを構成します。1 筐

体内にクラスタが構成できるため、システムコストを低減するメリットがありますが、IO ユニット

がシングルポイントになるデメリットがあります。

図 1.4 筐体内クラスタ


8


1.2.3 サポート構成

■ ハードウェア構成クラスタシステムを構成するすべてのノードは、同一構成（CPU 数、CPU 周波数、メモリ容量、

ハードディスク容量、ハードディスク数）を推奨します。

PRIMECLUSTER 4.3A20 以前では最大 4 ノード、PRIMECLUSTER 4.3A30 以降では最大 16 ノ

ードをサポートしています。

クラスタの運用形態によって必要となるノードの数は異なります。クラスタ運用形態の詳細につい

ては、『PRIMECLUSTER 導入運用手引書』を参照してください。

モデル別サポート構成、ノードの組み合わせを以下の表に示します。

表 1.2 モデル別サポート構成（ハードウェア）

モデルクラスタ構成

筐体間クラスタ筐体内クラスタ

1400S／1400S2 ○ △

1400E／1400E2

○ ○ 1400L／1400L2

1800E／1800E2

1800L／1800L2

○: 可能 △: IO ユニット非冗長

1400Sおよび1400S2は IOユニット非冗長のため、IOユニット故障時に筐体がダウンします。

また、IO ユニットの保守時にも全パーティションの電源をオフにする必要があります。


9


表 1.3 ノードの組み合わせ

自ノード相手ノード

1400S 1400S2 1400E 1400E2 1400L 1400L2 1800E 1800E2 1800L 1800L2

1400S ○ × × × × × × × × ×

1400S2 × ○ × × × × × × × ×

1400E × × ○ × × × × × × ×

1400E2 × × × ○ × × × × × ×

1400L × × × × ○ × × × × ×

1400L2 × × × × × ○ × × × ×

1800E × × × × × × ○ × × ×

1800E2 × × × × × × × ○ × ×

1800L × × × × × × × × ○ ×

1800L2 × × × × × × × × × ○

○: サポート ×：未サポート

■ ソフトウェア構成モデルにより、対応するサーバ管理ソフトウェアが異なります。

表 1.4 モデル別サポート構成（ソフトウェア）

モデルサーバ管理ソフト

1400S／1400E／1400L

1800E／1800L PSA

1400S2／1400E2／1400L2

1800E2／1800L2 SVmco


10


PRIMECLUSTER によるクラスタシステム 1.3PRIMECLUSTER は、クラスタシステムを構築するためのソフトウェアです。

サーバ、外部ディスク装置、ネットワーク、ミドルウェアなどのシステムの構築要素を冗長化技術によ

り仮想化し、異常検出、フェイルオーバー（業務の引継ぎ）および縮退機能により、自律的に業務を継

続することで、システム全体の高信頼化を実現します。

PRIMECLUSTER は、ハードウェア機構と連携して、運用中のパーティションまたは筐体で障害が発

生した場合でも、待機中のパーティションおよび筐体に業務を引き継ぎ、高い可用性を実現します。

PRIMECLUSTER を使用したクラスタシステムを構築する際は、PRIMECLUSTER 4.3 以降を使用し

てください。

PRIMECLUSTER の各製品と提供機能を以下の表に示します。

PRIMECLUSTER の詳細については、以下の URL を参照してください。

http://software.fujitsu.com/jp/primecluster/index.html

表 1.5 PRIMECLUSTER の各製品と提供機能

製品名機能

PRIMECLUSTER Enterprise Edition

PRIMECLUSTER HA Server

PRIMECLUSTER GDS

PRIMECLUSTER GLS

クラスタ制御並列データベース ○ ― ― ― HA（切替え）型クラスタ ○ ○ ― ―

ストレージ制御

ソフトウェア RAID 機構 ○ ○ ○ ―

ボリューム管理機能 ○ ○ ○ ― 共用ファイルシステム機能 ○ ○ ― ―

ネットワーク制御伝送路二重化機能 ○ ○ ― ○

○: サポート ―：非サポート

PRIMECLUSTER Enterprise Edition

並列データベース・HA（切替え）などの豊富なクラスタリング機能と、ボリューム管理機能、共用

ファイルシステム機能、ネットワーク冗長化機能などシステム全体を高可用化する機能をセットにし

た高信頼基盤ソフトウェアです。

PRIMECLUSTER GDS、PRIMECLUSTER GLSを包含する製品です。

PRIMECLUSTER HA Server

HA（切替え）による豊富なクラスタリング機能と、ボリューム管理機能、共用ファイルシステム機

能、ネットワーク冗長化機能などシステム全体を高可用化する機能をセットにした高信頼基盤ソフト

ウェアです。

PRIMECLUSTER GDS、PRIMECLUSTER GLSを包含する製品です。


11

http://software.fujitsu.com/jp/primecluster/index.html


PRIMECLUSTER GDS

システムやデータが格納されているディスク装置をミラーリングし、ディスク故障などの不測の事態

からお客様の資産を守るボリューム管理ソフトウェアです。

PRIMECLUSTER GLS

複数のNIC（Network Interface Card）を使用して、自システムが接続されるネットワーク伝送路を

冗長化し、通信全体の高信頼化を実現するソフトウェアです。通信業務の継続性が重視されるシステ

ムに対して最適なネットワークソリューションを提供します。

PRIMECLUSTER GDS Snapshot

PRIMECLUSTERのGDSのボリューム管理機能を利用したシステムにおいて、ディスクやボリュー

ムのスナップショットを瞬時に作成するオプションソフトウェア製品です。

ディスクのバックアップ／リストア作業時の業務停止時間を大幅に削減します。


12


2 ネットワーク

ネットワークの種類 2.1PRIMEQUEST 1000 シリーズで使用されるネットワークの種類を以下に示します。

PRIMEQUEST 1000 シリーズの基本的なネットワーク設定については、『運用管理マニュアル』を参

照してください。

管理LAN

外部の運用管理サーバなどと各パーティション、MMBを接続し、サーバやソフトウェアなどの管理

をするLANです。

► パーティションの管理 LAN

パーティションの OS、アプリケーション、ミドルウェアなどを監視します。クラスタの管理

にも使用します。

► MMB の管理 LAN

筐体内のハードウェアを監視し、監視情報を送出します。

業務LAN

お客様が業務で使用するLANです。

クラスタインタコネクト

ノードの状態を相互に監視するために、ノード間で使用するクラスタ専用のLANです。業務LANとク

ラスタインタコネクトは別々に敷設する必要があります。

管理LAN、業務LANおよびクラスタインタコネクトは、すべてセグメントを分けてください。

図 2.1 ネットワークの種類


13


管理 LAN のクラスタ運用（パーティションの管理 LAN） 2.2クラスタシステムのパーティションの管理 LAN は、ハードウェア機構と連携し、以下の機能で使用し

ます。

ノードの状態監視

ハードウェアが提供する機能を利用したノードの状態監視を行います。突然のシステムパニックや電

源切断など、他のノードに異常が発生した場合にハードウェア機構と連携し、その異常を即時に検知

します。

ノードの強制停止

ハードウェアが提供する機能を利用し、他ノードを意図的にパニックまたはリセットさせることで確

実な強制停止を実現し、ユーザー資産への競合を防ぎます。

また、パーティションの管理 LAN は、クラスタ運用管理を行う Web-Based Admin View を動作させる

ためのコンソールとも接続されます。Web-Based Admin View の詳細については、以下のサイトから

「PRIMECLUSTER」を検索し、PRIMECLUSTER 4.3A00 製品以降の『PRIMECLUSTER Web-Based

Admin View 操作手引書』を参照してください。

http://software.fujitsu.com/jp/manual/


14

http://software.fujitsu.com/jp/manual/


クラスタインタコネクト 2.3PRIMEQUEST 1000 シリーズのクラスタ構成では、各ノード間を専用の LAN で接続する必要がありま

す。このノード間をつなぐネットワークをクラスタインタコネクトといいます。ノードの状態を相互に

監視し、異常が発生した場合の切替えなどの制御を行います。

クラスタインタコネクトはクラスタシステムの重要な構成要素であり、クラスタインタコネクトの二重

化を推奨します。

2.3.1 ネットワーク機器

インタコネクトの構成例

インタコネクトは、GSPB に 1 本、以下のどちらかにもう 1 本接続することを推奨しています。

► IOB の PCI スロットに増設した NIC

► PCI ボックスの PCI スロットに増設した NIC

クラスタインタコネクトで使用するネットワーク機器は、『PRIMEQUEST 1000 シリーズシステム

構成図』を参照してください。

2.3.2 クラスタインタコネクトの構成

インタコネクトの多重化

インタコネクトを多重化することで、システムの可用性を向上させます。

インタコネクトの接続例について以下の図に示します。

図 2.2 2 ノードのインタコネクト接続例

図 2.3 3 ノードのインタコネクト接続例

3 ノード以上の場合は、各ノードを HUB またはスイッチに接続してください。


15


ネットワーク構成例 2.4筐体間クラスタと筐体内クラスタの接続例（ファイバーチャネル接続の場合）を以下の図に示します。

GSPB の LAN ポートと、IOB に搭載した NIC のポートを使用し、各 LAN および FC ケーブルを冗長

化しています。

図 2.4 2 ノードのネットワーク構成例（ファイバーチャネル接続の筐体間クラスタ）


16


図 2.5 2 ノードのネットワーク構成例（ファイバーチャネル接続の筐体内クラスタ）

ネットワーク接続に関する留意事項

► 管理 LAN は、PRIMEQUEST の制御専用のため、インタコネクト通信には使用しないでくだ

さい。

► クラスタインタコネクトは、アプリケーション用の業務 LAN とは別に敷設してください。

► クラスタインタコネクトで使用するスイッチは、STP（スパニングツリープロトコル）を使用

しないでください。リンクの再構成時に無通信状態になり、インタコネクト通信ができなくな

る可能性があります。

► クラスタインタコネクトを二重化する際は、シングルポイント故障にならないよう、コンポー

ネントやコネクターを分けて接続することを推奨します。


17


3 共用 I/O 装置

外部ディスク装置 3.1外部ディスク装置を以下の接続方法により共用できます。

ファイバーチャネル接続

iSCSI接続

PRIMEQUEST 1000 シリーズでサポートする外部ディスク装置は、『PRIMEQUEST 1000 シリーズシ

ステム構成図』を参照してください。

【留意事項】

外部ディスク装置を接続するPCIカードは、二重化してノードに搭載することを推奨します（二重化

したPCIカードはコンポーネントやコネクターを分けて搭載することを推奨します）。

外部ディスク装置を使用する場合、信頼性を重視するシステムではRAID0は使用しないでください。

RAIDレベルに関しては、接続する各装置のドキュメントを参照してください。さらに各装置は2コン

トローラー構成、パスの二重化構成を推奨します。

外部ディスク装置の共用は、複数ノードからのアクセスが競合するため、システム性能の低下を招く

要因となります。外部ディスク装置は、必要最小限に絞る、複数のディスクに分ける、同一インター

フェース上のディスク台数を減らすなどの配慮が必要です。

テープ装置 3.2LTO ライブラリ装置を以下の接続方法により共用できます。

ファイバーチャネル接続

PRIMEQUEST 1000 シリーズでサポートするテープ装置は、『PRIMEQUEST 1000 シリーズシステ

ム構成図』を参照してください。

テープ装置、ライブラリ装置を使用する場合、バックアップソフトウェアが必要です。バックアップソフトウェアについては「4 バックアップ／リストア」を参照してください。


18


共用 I/O 装置の接続 3.3

3.3.1 外部ディスク装置の接続

以下の二重化構成を推奨します（図はファイバーチャネル接続を例に説明しています）。

①ノード側は PCI カードを二重化

②スイッチを使用し、アクセスパスを二重化

③外部ディスク装置のコントローラーを二重化

図 3.1 外部ディスク装置のファイバーチャネル接続例


19


【留意事項】

► 接続台数および接続方法の詳細については、接続する外部ディスク装置のドキュメントを参照

してください。

► 外部ディスク装置、ノードの接続台数がスイッチのポート数を超える場合は、カスケード接続

してください。スイッチについてはスイッチのドキュメントを参照してください。

► ETERNUS を接続するときには、ETERNUS マルチパスドライバ（MPD）の使用を推奨しま

す。クラスタシステムでは、2～8 パスまでサポートしています。


20


3.3.2 テープ装置の接続

クラスタ運用形態が運用待機型の 2 ノード間共用接続、またはカスケード形態であれば 4 ノードまで

の共用接続構成ができます。

► 各ノードからの同時アクセスはできません。

► 共用接続用にスイッチを用意してください。

► PCI カードは、共用ファイル接続しているものとは別に（テープ装置接続用に）用意してくだ

さい。

ファイバーチャネル接続の例を以下の図に示します。

図 3.2 テープ装置のファイバーチャネル接続例


21


4 バックアップ／リストア

システムボリュームのバックアップ／リストア 4.1ローカルブート構成の場合、PRIMECLUSTER GDS および PRIMECLUSTER GDS Snapshot を使

用することで、システム運用中に、ある時点のシステムボリュームをバックアップすることができます。

PRIMECLUSTER GDS および PRIMECLUSTER GDS Snapshot の使用方法については、

『PRIMECLUSTER Global Disk Services 説明書』を参照してください。なお、ソフトウェアの設定・

構成の変更、またはハードウェアの構成を変更する際には、必ずバックアップを行ってください。

また、バックアップのためにノードを停止できる場合、外部記憶装置へバックアップすることが可能で

す。ただし、ノードを停止する場合は、クラスタの手順に従って実施する必要があります。リストアも

一般の場合と同様です。

なお、クラスタの構成を変更した場合は、その都度バックアップするようにしてください。構成変更前

のデータを構成変更後にリストアすると、リストア後の状態一致化の処理でエラーとなります。

また、クラスタはノード間で連携して動作するソフトウェアであるため、各ノードに固有情報を持ちま

す。したがって、ノードごとにバックアップし、バックアップしたノードにデータをリストアするよう

にしてください。

一般の場合のシステムボリュームのバックアップ／リストア方法については、『Linux ユーザーズマニ

ュアル』を参照してください。

クラスタ構成時の手順については、PRIMECLUSTER のマニュアルを参照してください。

► PRIMECLUSTER GDSおよびPRIMECLUSTER GDS Snapshotを使用してシステムボリュ

ームをバックアップできるのは、RHEL6 (for Intel64)の場合です。

► ゲスト OS 上で採取したバックアップデータをテープなどの外部記憶媒体に保存する場合は、

ハイパーバイザーにバックアップデータを転送した上で、ハイパーバイザーから外部記憶装置

に保存してください。


22


データボリュームのバックアップ／リストア 4.2ユーザーデータのバックアップは、バックアップ専用ソフトウェアを使用することにより、クラスタ運

用中に実施することができます。

構成例を以下の図に示します。

図 4.1 バックアップの構成例

共用ディスク内のユーザーデータは、Server / Manager ソフトの制御の下、運用ノードの Client / Agent

ソフトによりバックアップ装置にバックアップされます。

この場合、次ページのソフトウェア（およびネットワークストレージサーバ）を利用することができま

す。

なお、PRIMECLUSTER GDS Snapshot を使用することにより、バックアップデータを ETERNUS 上

のディスク（マスタ）からディスク（プロキシ）へ採取することが可能になります。

対応しているテープ装置や各種機器は製品ごとに異なりますので、詳細はそれぞれの製品のマ

ニュアルおよびハンドブックを参照してください。


23


以下の製品は、フェイルオーバー発生後も、ユーザーが意識することなく継続してバックアップデータ

を管理できます。

PRIMECLUSTER GDS Snapshot

ETERNUS SF AdvancedCopy Manager

ETERNUS SF TSM

SystemcastWizard Professional

NetVault

クラスタの業務サーバに ETERNUS SF AdvancedCopy Manager を、バックアップサーバに

他のバックアップソフトウェアを導入する場合、ETERNUS SF AdvancedCopy Manager のア

ドバンスト・コピー機能を利用して作成したレプリカ（コピーしたデータ）はバックアップサ

ーバから直接バックアップすることができるため、クラスタを意識する必要はありません。


24


5 仮想環境でのクラスタ構成

仮想マシン機能を使用したクラスタ構成の種類 5.1PRIMECLUSTER は、仮想環境においても、ハードウェア（ネットワークやディスク）の冗長構成の

考え方は、物理的なクラスタ構成と同じです。

PRIMECLUSTER では、以下の仮想環境をサポートしています。

► KVM（RHEL6）

► RHEL5-Xen

► VMware

仮想環境でのクラスタ構成は、管理 OS、筐体の使用数により、以下のパターンがあります。

► 管理 OS が 1 つの場合（「5.1.1 管理 OS が 1 つの場合」参照）

► 管理 OS が複数の筐体間クラスタ（「5.1.2 管理 OS が複数の場合」の筐体間クラスタを参照）

仮想マシン機能を使用したクラスタシステムの詳細および注意事項については、『PRIMECLUSTER 導

入運用手引書』を参照してください。

► Xen 環境では、管理 OS およびクラスタシステムに組み込むすべてのゲスト OS に仮想マシン

機能サービス支援機能オプション（vmSP）をインストールする必要があります。 vmSP は FJ-LSP（富士通 Linux サポートパッケージ）の適用で、インストールされます。

FJ-LSP を使用するには、有償サポート・サービス（SupportDesk Standard）の契約が必要

です。FJ-LSP の詳細は、『Linux ユーザーズマニュアル（SDK）』を参照してください。

► KVM 環境では、管理 OS をハイパーバイザーと読み替えてください。

► Xen 環境での仮想マシン機能を使用したクラスタ構成に関する注意事項は、『RHEL5-Xen 仮

想マシン機能ユーザーズマニュアル（SDK）』の「F.6 クラスタ運用時の注意事項」を参照

してください。

► VMware 環境では、管理 OS を ESX ホストと読み替えてください。

【留意事項】

仮想環境では、複数のクラスタシステムで物理 NIC を共用できます（仮想ブリッジは別で作成が必要で

す）。


25


5.1.1 管理 OS が 1 つの場合

本構成は、テスト環境での使用を推奨します。

1 つの物理マシンでクラスタシステムを動作させ、ゲスト OS の異常時に業務を継続動作させること

ができます。

► 本構成は、PRIMECLUSTER 4.3A00 の VMware 環境では使用できません。

► テスト環境を目的としているため、仮想のインタコネクトが 2 本必要です。

図 5.1 管理 OS が 1 つの場合の構成例


26


5.1.2 管理 OS が複数の場合

本構成では、ハードウェア（ネットワークやディスク）が故障しても、フェイルオーバーにより業務

を継続動作させることができます。

KVM または Xen の場合、管理 OS にも PRIMECLUSTER を導入するかどうかで、監視できる範囲

が異なります。

► 筐体間クラスタ

図 5.2 管理 OS が 2 つの場合の構成例（管理 OS に PRIMECLUSTER を導入しない構成）


27


► 筐体間クラスタ（管理 OS 異常切替機能を使用する場合）KVM または Xen の場合のみ

図 5.3 管理 OS が 2 つの場合の構成例（管理 OS に PRIMECLUSTER を導入する構成）


28


信頼性の比較 5.2管理 OS および筐体の使用数が多いほど、冗長化される部分が増え障害発生時の信頼性が高まります。

以下に構成パターンと冗長化の比較を示します。

表 5.1 KVM または Xen 環境での冗長化比較表

障害発生箇所

構成パターン

管理 OS 1 つ管理 OS 複数

（筐体間）

管理 OS 複数

（管理 OS 異常切替機能

を使用する場合）（*1）

パーティション共通のハードコンポーネント（IO ユニットなど）

× ○ ○

パーティション別のハードコンポーネント（SB、HDD など）

× ○ ○

管理 OS × × ○ ゲスト OS ○ ○ ○ ○：待機系に自動で切り替え業務継続 ×：業務停止

（*1）管理 OS 異常切替機能を使用する場合、ゲスト OS と管理 OS の両方に PRIMECLUSTER の導入が必要。

表 5.2 VMware 環境での冗長化比較表

障害発生箇所

構成パターン

管理 OS 1 つ管理 OS 複数

（筐体間）

パーティション共通のハードコンポーネント（IO ユニットなど）

× ○

パーティション別のハードコンポーネント（SB、HDD など）

× ○

ESX ホスト × ○（*2）ゲスト OS ○ ○ ○：待機系に自動で切り替え業務継続 ×：業務停止

（*2）ESXホストに異常が発生した場合、対象ゲストOSのハングアップを検出しゲストOSを待機系に切替え。


29


6 留意事項

PRIMEQUEST 1000 シリーズの留意事項 6.1 1400E、1400E2、1800E、1800E2の筐体内クラスタ構成時、IOB、GSPBを共有しないようパーテ

ィションを構成することを推奨します。IOB、GSPBを分けることにより、冗長構成の特長を活かし

たIOB、GSPBの故障対応が可能になり、クラスタシステムとしてさらなる可用性の向上を図ること

ができます。

PSAまたはSVmcoが各パーティションにインストールされている必要があります。

► PSA または SVmco は、クラスタ環境に限らず、PRIMEQUEST の運用に必須です。

PSA または SVmco がインストールされていない場合、障害発生時に他ノードへクラスタ切替

えできません。

► お使いのモデルにより、PSA または SVmco のどちらが対応するかが変わります。

それぞれの導入マニュアルを参照の上、インストールと必要な設定を実施してください。

1400S、1400E、1400L、1800E、1800L：PSA

1400S2、1400E2、1400L2、1800E2、1800L2：SVmco

MMBが二重化されていない場合、MMBが故障し、かつ、サーバ切替えとなる故障が発生した場合、

管理者がクラスタ切替えを指示するまでの間は業務が停止するため、速やかに故障したMMBを交換

する必要があります。

クラスタを構築する場合は、以下の設定を必ず行ってください。

► MMB の物理 IP アドレス（MMB#0、MMB#1）の設定

以下のドキュメントを参照してください。

『導入マニュアル』「3.3.6 MMB のネットワーク設定」

► 管理 LAN IP アドレスの設定

お使いのモデルにより、以下のドキュメントを参照してください。

1400S、1400E、1400L、1800E、1800L：『導入マニュアル』「6.2.7 管理 LAN IP アドレス

の設定」

1400S2、1400E2、1400L2、1800E2、1800L2：『SVmco ユーザマニュアル』

► ファイアーウォール機能の確認

お使いのモデルにより、以下のドキュメントを参照してください。

1400S、1400E、1400L、1800E、1800L：『導入マニュアル』「6.2.4 ファイアーウォール機

能の確認（ポートの開放）」

1400S2、1400E2、1400L2、1800E2、1800L2：『SVmco ユーザマニュアル』


30


PRIMECLUSTER の留意事項 6.2 PRIMEQUEST 1000シリーズでは、PRIMECLUSTER 4.3A00からサポートされています。

Oracle使用システムでPRIMECLUSTERを使用する際は、OSとOracle Databaseの組み合わせにつ

いて、各適応OSの以下のマニュアルを参照してください。

『PRIMECLUSTER Wizard for Oracle 導入運用手引書』

PRIMECLUSTERのパッチ情報については、SupportDesk-Web

（http://eservice.fujitsu.com/supportdesk/）を参照してください。

クラスタを構成する場合、時刻同期を行うため、NTPの設定はslewモードにしてください。

クラスタシステム環境下では、各サーバ、外部ディスク装置に2台ずつUPSを接続することを推奨し

ます。

UPSが接続されていないと、停電や電源異常により片側のノードの電源が突然切断された場合に、ク

ラスタのフェイルオーバーが動作しないことがあります。

物理的なクラスタ構成では、ハードウェア機構と連携してノード異常を即時に検知することができま

す。仮想環境ではノード（ゲストOS）異常を即時に検知する仕組みがないため、物理的なクラスタ構

成よりノード異常時のクラスタ切替えに時間がかかります。


31

http://eservice.fujitsu.com/supportdesk/


付録 Reserved SB 機能

故障した SB を自動的に切り離し、あらかじめ Reserved SB（障害待機用として設定される予備の SB）

として設定しておいた SB を組み込んでパーティションを再起動する機能です。Reserved SB をパー

ティションの再起動時に自動的に組み込むことで、パフォーマンスの低下を防ぎ、業務の早期復旧が

可能となります（詳細は、『運用管理マニュアル』の「3.2.1 Reserved SB」を参照）。

図： Reserved SB 運用例


32


改版履歴

版数日付変更箇所（*）変更内容

01 2010-03-31 ― ―

02 2010-08-10 5 仮想環境でのクラスタ構成章を追加

03 2011-04-28 全体新モデル対応

04 2011-06-30 全体 RHEL6、VMware サポート

05 2014-04-10 全体 PRIMECLUSTER 4.3A30 サポート

（*）変更箇所は、最新版の項番を示している。


33


使用条件著作権・商標権・その他の知的財産権について

コンテンツ（文書・画像・音声等）は、著作権・商標権・その他の知的財産権で保護されています。

本コンテンツは、個人的に使用する範囲でプリントアウトまたはダウンロードできます。ただし、こ

れ以外の利用（ご自分のページへの再利用や他のサーバへのアップロード等）については、当社また

は権利者の許諾が必要となります。

保証の制限

本コンテンツについて、当社は、その正確性、商品性、ご利用目的への適合性等に関して保証するも

のではなく、そのご利用により生じた損害について、当社は法律上のいかなる責任も負いかねます。

本コンテンツは、予告なく変更・廃止されることがあります。

不明な点は、「本製品のお問い合わせ」(http://primeserver.fujitsu.com/primequest/contact/) より

お尋ねください。

C122-A007-05

2014.04

無断転載を禁じます。


34

http://primeserver.fujitsu.com/primequest/contact/

Documents

FUJITSU Server PRIMEQUEST 1000シリーズ クラスタ構成設 …シリーズにおけるRHEL5 およびRHEL6 の環境で、PRIMECLUSTER を使用したクラスタシステムを設計する際に必要となるネットワーク、共用I/O

FUJITSU Server PRIMEQUEST 1000シリーズクラスタ構成設 …シリーズにおけるRHEL5 およびRHEL6 の環境で、PRIMECLUSTER を使用したクラスタシステムを設計する際に必要となるネットワーク、共用I/O