RHEL HA Add-On を使用した SAP HANA Scale-Out System Replication の自動化

手順

1. ステージング設定が存在しない場合は、次のコマンドを使用して、SAP HANA テストデプロイメントの登録を Red Hat Subscription Management (RHSM) に直接割り当てることができます。

   [root:~]# subscription-manager register

   Copy to Clipboard Toggle word wrap
2. ユーザー名とパスワードを入力します。

3. rhel-8-for-x86_64-sap-solutions-rpms リポジトリーで利用可能なすべてのプールをリスト表示します。

   [root:~]# subscription-manager list --available --matches="rhel-8-for-x86_64-sap-solutions-rpms"

   Copy to Clipboard Toggle word wrap

   詳細は、基本的なシステム設定 を参照してください。

   注記

   企業プール ID が必要です。リストが空の場合は、Red Hat に問い合わせて企業のサブスクリプションのリストを入手してください。

4. プール ID をサーバーインスタンスにアタッチします。

   [root:~]# subscription-manager attach --pool=XXXXXXXXXXXXXXXXXXXXXXXXXXXXX

   Copy to Clipboard Toggle word wrap

5. 'sap-solutions' のリポジトリーが有効になっているかどうかを確認します。

   [root:~]# yum repolist | grep sap-solution
   rhel-8-for-x86_64-sap-solutions-rpms RHEL for x86_64 - SAP Solutions (RPMs)

   Copy to Clipboard Toggle word wrap

   RHEL 8 に必要なリポジトリーを有効化することができます:

   [root:~]# subscription-manager repos --enable=rhel-8-for-x86_64-sap-solutions-rpms --enable=rhel-8-for-x86_64-highavailability-rpms

   Copy to Clipboard Toggle word wrap

   詳細は、RHEL for SAP サブスクリプションおよびリポジトリー を参照してください。

6. すべてのシステムでパッケージを更新し、正しい RPM パッケージとバージョンがインストールされていることを確認します。

   [root:~]# yum update -y

   Copy to Clipboard Toggle word wrap

手順

1. すべてのホストに root ユーザーとしてログインし、/etc/hosts ファイルを設定します。
2. scale-out 環境内のすべての SAP HANA ホストに対してホストエントリーを作成します。

3. ホストファイルをすべてのノードにコピーします。次の出力例に示す順序でホスト名を設定することが重要です。この順序で設定されない場合、SAP HANA 環境はデプロイメントまたは運用プロセス中に失敗します。

   注記

   この設定は、このドキュメントの SAP HANA Scale-Out 環境の準備 セクションに記載されているパラメーターに基づいています。

   [root:~]# cat << EOF >> /etc/hosts
   10.0.1.21 dc1hana01.example.com dc1hana01
   10.0.1.22 dc1hana02.example.com dc1hana02
   10.0.1.23 dc1hana03.example.com dc1hana03
   10.0.1.24 dc1hana04.example.com dc1hana04
   10.0.1.31 dc2hana01.example.com dc2hana01
   10.0.1.32 dc2hana02.example.com dc2hana02
   10.0.1.33 dc2hana03.example.com dc2hana03
   10.0.1.34 dc2hana04.example.com dc2hana04
   10.0.1.41 majoritymaker.example.com majoritymaker
   EOF

   Copy to Clipboard Toggle word wrap

手順

1. 追加の /usr/sap パーティションのすべての SAP HANA ホストに root ユーザーとしてログインします。

   注記

   一般に、デフォルトの XFS 形式とマウントオプションは、ほとんどのワークロードに最適です。Red Hat では、特定の設定変更がファイルシステムのワークロードにメリットをもたらすと予想される場合を除き、デフォルト値を使用することを推奨します。サポートされているすべてのファイルシステムを使用できます。詳細は、SAP Note 2972496 - SAP HANA Filesystem Types を参照してください。ソフトウェア RAID が使用されている場合、mks.xfs コマンドは、ハードウェアに合わせて正しいストライプユニットと幅を自動的に設定します。

2. 必要なマウントポイントを作成します。

   [root:~]# mkdir -p /usr/sap

   Copy to Clipboard Toggle word wrap

3. 論理ボリューム上に、XFS に基づくファイルシステムを作成します。

   [root:~]# mkfs -t xfs -b size=4096 /dev/sdb

   Copy to Clipboard Toggle word wrap

   XFS ファイルシステムの作成とチューニングの可能性に関する詳細は、man mkfs.xfs コマンドを実行してください。XFS ファイルシステムの最適なパフォーマンスについては、ソリューション記事 What are some of best practices for tuning XFS filesystems を参照してください。

4. /etc/fstab にマウントディレクティブを記述します。

   [root:~]# echo "/dev/sdb /usr/sap xfs defaults 1 6" >> /etc/fstab

   Copy to Clipboard Toggle word wrap
   注記

   マウントポイントがファイルシステムリソースによって管理されている場合、これらのファイルシステムは後で /etc/fstab ファイルで再度コメントアウトする必要があります。 

5. /etc/fstab の XFS ファイルシステムをマウントできるか確認します。

   [root:~]# mount /usr/sap

   Copy to Clipboard Toggle word wrap

手順

1. 共有ストレージ設定のすべての SAP HANA ホストに root ユーザーとしてログインします。

   注記

   nfs-utils パッケージが必要です。すべてのデータセンターには独自のストレージ設定が必要です。この例では、ストレージ設定は共有ストレージ環境として構築されます。両方の scale-out 環境は、独自の NFS 共有を使用しています。この設定は、このドキュメントの SAP HANA Scale-Out 環境の準備 セクションの情報に基づいています。実稼働環境では、この手順は、任意のハードウェアベンダーによってサポートされるように設定する必要があります。

2. nfs-utils パッケージをインストールします。

   [root:~]# yum install -y nfs-utils

   Copy to Clipboard Toggle word wrap

3. Datacenter 1 のノードを設定します。

   [root:~]# mkdir -p /hana/{shared,data,log}
   cat <<EOF >> /etc/fstab
   10.0.1.61:/data/dc1/shared /hana/shared nfs4 defaults 0 0
   10.0.1.61:/data/dc1/data /hana/data nfs4 defaults 0 0
   10.0.1.61:/data/dc1/log /hana/log nfs4 defaults 0 0
   EOF

   Copy to Clipboard Toggle word wrap

   ボリュームをマウントするには、次のコマンドを実行します。

   [root:~]# mount -a

   Copy to Clipboard Toggle word wrap

4. Datacenter 2 のノードを設定します。

   [root:~]# mkdir -p /hana/{shared,data,log}
   cat <<EOF >> /etc/fstab
   10.0.1.62:/data/dc2/shared /hana/shared nfs4 defaults 0 0
   10.0.1.62:/data/dc2/data /hana/data nfs4 defaults 0 0
   10.0.1.62:/data/dc2/log /hana/log nfs4 defaults 0 0
   EOF

   Copy to Clipboard Toggle word wrap

   ボリュームをマウントするには、次のコマンドを実行します。

   [root:~]# mount -a

   Copy to Clipboard Toggle word wrap

前提条件

1. 共有ストレージ設定のすべてのホストに root ユーザーとしてログインしている。
2. SAP HANA のインストールソースを準備している。

3. SAP HANA と互換性のあるホスト名を設定している。

   [root:~]# hostnamectl set-hostname dc1hana01

   Copy to Clipboard Toggle word wrap

手順: /etc/hosts の確認

1. /etc/hosts にシステムのホスト名と IP アドレスに一致するエントリーが含まれていることを確認します: .example.com

   [root:~]# hostname
   <hostname>
   [root:~]# hostname -s
   <hostname>
   [root:~]# hostname -f
   <hostname>.example.com
   [root:~]# hostname -d
   example.com

   Copy to Clipboard Toggle word wrap

2. システム言語を英語に設定します。

   [root:~]# localectl set-locale LANG=en_US.UTF-8

   Copy to Clipboard Toggle word wrap

手順: NTP の設定

1. /etc/chrony.conf を編集し、サーバー行が NTP サーバーを反映していることを確認します。

   [root:~]# yum -y install chrony
   [root:~]# systemctl stop chronyd.service

   Copy to Clipboard Toggle word wrap

2. タイムサーバーのエントリーを確認します。

   [root:~]# grep ^server /etc/chrony.conf
   server 0.de.pool.ntp.org
   server 1.de.pool.ntp.org

   Copy to Clipboard Toggle word wrap

3. chrony サービスを有効にして起動します。

   [root:~]# systemctl enable chronyd.service
   [root:~]# systemctl start chronyd.service
   [root:~]# systemctl restart systemd-timedated.service

   Copy to Clipboard Toggle word wrap

4. chrony サービスが有効化されていることを確認します。

   [root:~]# systemctl status chronyd.service
   chronyd.service enabled
   [root:~]# chronyc sources
   210 Number of sources = 3
   MS Name/IP address Stratum Poll Reach LastRx Last sample
   =====================================================================
   ^* 0.de.pool.ntp.org 2 8 377 200 -2659ns[-3000ns] +/- 28ms
   ^-de.pool.ntp.org 2 8 377 135 -533us[ -533us] +/- 116ms
   ^-ntp2.example.com 2 9 377 445 +14ms[ +14ms] +/- 217ms

   Copy to Clipboard Toggle word wrap

手順 (オプション)

1. SAP Host Agent の sapadm および sapsys ユーザーを作成し、sapadm ユーザーのパスワードを設定します。ユーザー sapadm の UID 996 とグループ sapsys の GID 79 は、このドキュメントの SAP HANA Scale-Out 環境の準備 セクションのパラメーターに基づいています。

   [root:~]# adduser sapadm --uid 996
   [root:~]# groupadd sapsys --gid 79
   [root:~]# passwd sapadm

   Copy to Clipboard Toggle word wrap

2. 一時ディレクトリーを作成し、インストールソースを展開して、一時ディレクトリーから SAP Host Agent をインストールします。INSTALLDIRHOSTAGENT 変数は、例として挙げています。

   [root:~]# export TEMPDIR=$(mktemp -d)
   [root:~]# export
   INSTALLDIRHOSTAGENT=/install/HANA/DATA_UNITS/HDB_SERVER_LINUX_X86_64/
   [root:~]# systemctl disable abrtd
   [root:~]# systemctl disable abrt-ccpp
   [root:~]# cp -rp ${INSTALLDIRHOSTAGENT}/server/HOSTAGENT.TGZ $TEMPDIR/ cd $TEMPDIR
   [root:~]# tar -xzvf HOSTAGENT.TGZ
   [root:~]# cd global/hdb/saphostagent_setup/
   [root:~]# ./saphostexec -install

   Copy to Clipboard Toggle word wrap

   安全な操作は暗号化された接続でのみ機能します。これを実現するには、正しく機能する SSL 接続を設定します。SSL パスワードが必要です。次の例は、このドキュメントの SAP HANA Scale-Out 環境の準備 セクションのパラメーターに基づいています。

   [root:~]# export MYHOSTNAME=$(hostname)
   [root:~]# export SSLPASSWORD=Us3Your0wnS3cur3Password
   [root:~]# export LD_LIBRARY_PATH=/usr/sap/hostctrl/exe/
   [root:~]# export SECUDIR=/usr/sap/hostctrl/exe/sec
   [root:~]# cd /usr/sap/hostctrl/exe
   [root:~]# mkdir /usr/sap/hostctrl/exe/sec
   [root:~]# /usr/sap/hostctrl/exe/sapgenpse gen_pse -p SAPSSLS.pse -x $SSLPASSWORD -r /tmp/${MYHOSTNAME}-csr.p10 "CN=$MYHOSTNAME"
   [root:~]# /usr/sap/hostctrl/exe/sapgenpse seclogin -p SAPSSLS.pse -x $SSLPASSWORD -O sapadm chown sapadm /usr/sap/hostctrl/exe/sec/SAPSSLS.pse
   [root:~]# /usr/sap/hostctrl/exe/saphostexec -restart*

   Copy to Clipboard Toggle word wrap

3. SAP Host Agent がすべての SAP HANA ノードで使用可能であることを確認します。

   [root:~]# netstat -tulpen | grep sapstartsrv
   tcp      0     0 0.0.0.0:50014   0.0.0.0:*  LISTEN   1002  84028   4319/sapstartsrv
   tcp      0     0 0.0.0.0:50013   0.0.0.0:*  LISTEN   1002  47542   4319/sapstartsrv

   Copy to Clipboard Toggle word wrap
   注記

   すべてのプロセスが識別されるわけではありません。所有されていないプロセスの情報は表示されません。すべてのプロセスを表示するには、root ユーザーである必要があります。

   [root:~]# netstat -tulpen | grep 1129
   tcp 0 	0     0.0.0.0:1129 	0.0.0.0:* 	LISTEN 	996	 25632	 1345/sapstartsrv

   Copy to Clipboard Toggle word wrap

   SAP Host Agent のインストール方法の詳細は、SAP Host Agent Installation を参照してください。

手順

1. 各データセンターの 1 つの SAP HANA ノードに root ユーザーとしてログインし、SAP HANA Scale-Out のインストールを開始します。

2. このソリューションでは、各データセンターの 1 つのノードで次のコマンドが実行されます。

   [root:~]# INSTALLDIR=/install/51053381/DATA_UNITS HDB_SERVER_LINUX_X86_64/
   [root:~]# cd $INSTALLDIR
   [root:~]# ./hdblcm --dump_configfile_template=/tmp/templateFile

   Copy to Clipboard Toggle word wrap
   重要

   正しい addhosts パラメーターを使用する必要があります。これにはインストールノードを含めないでください。

3. /tmp/templateFile.xml 内のパスワードを変更します。

   注記

   internal_network パラメーターは、内部 scale-out 通信ネットワーク用です。これにより、インストールプロセス中に、SAP HANA 設定ファイル global.ini に正しい設定が事前に入力されます。

   Datacenter 1 の例:

   [root:~]# cat /tmp/templateFile.xml | ./hdblcm \ --batch \ --sid=RH1 \ --number=10 \ --action=install \ --hostname=dc1hana01 \ --addhosts=dc1hana02:role=worker,dc1hana03:role=worker,dc1hana04:role =standby \ --install_hostagent \ --system_usage=test \ --sapmnt=/hana/shared \ --datapath=/hana/data \ --logpath=/hana/log \ --root_user=root \ --workergroup=default \ --home=/usr/sap/RH1/home \ --userid=79 \ --shell=/bin/bash \ --groupid=79 \ --read_password_from_stdin=xml \ --internal_network=192.168.101.0/24 \ --remote_execution=saphostagent

   Copy to Clipboard Toggle word wrap

   Datacenter 2 の例:

   [root:~]# cat /tmp/templateFile.xml | ./hdblcm \ --batch \ --sid=RH1 \ --number=10 \ --action=install \ --hostname=dc2hana01 \ --addhosts=dc2hana02:role=worker,dc2hana03:role=worker,dc2hana04:role =standby \ --install_hostagent \ --system_usage=test \ --sapmnt=/hana/shared \ --datapath=/hana/data \ --logpath=/hana/log \ --root_user=root \ --workergroup=default \ --home=/usr/sap/RH1/home \ --userid=79 \ --shell=/bin/bash \ --groupid=79 \ --read_password_from_stdin=xml \ --internal_network=192.168.101.0/24 \ --remote_execution=saphostagent

   Copy to Clipboard Toggle word wrap

4. インストールプロセスが完了したら、データセンターごとに 1 つのホストですべてが動作していることを確認します。

   [root:~]# su - rh1adm /usr/sap/hostctrl/exe/sapcontrol -nr 10 -function GetSystemInstanceList
   10.04.2019 08:38:21
   GetSystemInstanceList OK
   hostname, instanceNr, httpPort, httpsPort, startPriority, features, dispstatus
   dc1hana01,10,51013,51014,0.3,HDB|HDB_WORKER, GREEN
   dc1hana03,10,51013,51014,0.3,HDB|HDB_STANDBY, GREEN
   dc1hana02,10,51013,51014,0.3,HDB|HDB_WORKER, GREEN
   dc1hana04,10,51013,51014,0.3,HDB|HDB_WORKER, GREEN
   
   rh1adm@dc1hana01:/usr/sap/RH1/HDB10> HDBSettings.sh landscapeHostConfiguration.py
   | Host | Host | Host | Failover | Remove | Storage |
   Storage | Failover | Failover | NameServer | NameServer |
   IndexServer | IndexServer | Host | Host | Worker | Worker |
   | | Active | Status | Status | Status | Config |
   Actual | Config | Actual | Config | Actual | Config
   | Actual | Config | Actual | Config | Actual |
   | | | | | | Partition |
   Partition | Group | Group | Role | Role | Role
   | Role | Roles | Roles | Groups | Groups |
   | --------- | ------ | ------ | -------- | ------ | --------- |
   --------- | -------- | -------- | ---------- | ---------- |
   ----------- | ----------- | ------- | ------- | ------- | ------- |
   | dc1hana01 | yes | ok | | | 1 |
   1 | default | default | master 1 | master | worker |
   master | worker | worker | default | default |
   | dc1hana02 | yes | ok | | | 2 |
   2 | default | default | master 3 | slave | worker |
   slave | worker | worker | default | default |
   | dc1hana03 | yes | ok | | | 2 |
   2 | default | default | master 3 | slave | worker |
   slave | worker | worker | default | default |
   | dc1hana04 | yes | ignore | | | 0 |
   0 | default | default | master 2 | slave | standby |
   standby | standby | standby | default | - |
   
   rh1adm@dc1hana01: HDB info
   USER PID PPID %CPU VSZ RSS COMMAND
   rh1adm 31321 31320 0.0 116200 2824 -bash
   rh1adm 32254 31321 0.0 113304 1680 \_ /bin/sh
   /usr/sap/RH1/HDB10/HDB info
   rh1adm 32286 32254 0.0 155356 1868 \_ ps fx
   -U rh1adm -o user:8,pid:8,ppid:8,pcpu:5,vsz:10,rss:10,args
   rh1adm 27853 1 0.0 23916 1780 sapstart
   pf=/hana/shared/RH1/profile/RH1_HDB10_dc1hana01
   rh1adm 27863 27853 0.0 262272 32368 \_
   /usr/sap/RH1/HDB10/dc1hana01/trace/hdb.sapRH1_HDB10 -d -nw -f
   /usr/sap/RH1/HDB10/dc1hana01/daemon.ini
   pf=/usr/sap/RH1/SYS/profile/RH1_HDB10_dc1hana01
   rh1adm 27879 27863 53.0 9919108 6193868 \_
   hdbnameserver
   rh1adm 28186 27863 0.7 1860416 268304 \_
   hdbcompileserver
   rh1adm 28188 27863 65.8 3481068 1834440 \_
   hdbpreprocessor
   rh1adm 28228 27863 48.2 9431440 6481212 \_
   hdbindexserver -port 31003
   rh1adm 28231 27863 2.1 3064008 930796 \_
   hdbxsengine -port 31007
   rh1adm 28764 27863 1.1 2162344 302344 \_
   hdbwebdispatcher
   rh1adm 27763 1 0.2 502424 23376
   /usr/sap/RH1/HDB10/exe/sapstartsrvpf=/hana/shared/RH1/profile/RH1_HDB10_dc1hana01 -D -u rh1adm

   Copy to Clipboard Toggle word wrap

手順

1. 共有デバイス上の各データセンターの 1 つのノードにフックをインストールします。詳細は、Implementing a HA/DR Provider を参照してください。

2. フックを設定するために、hana 共有フォルダーにディレクトリーを作成します。これは、SAP HANA データベースから追加データを作成するように設定されています。これを有効にするには、システムを停止し、global.ini ファイルに 2 つの設定パラメーターを追加する必要があります。このソリューションの次の例では、ha_dr_provider_SAPHanaSr と trace の設定を示しています。

   [root@dc1hana01]# su - rh1adm
   [rh1adm@dc1hana01]% sapcontrol -nr 10 -function StopSystem *[rh1adm@dc1hana01]% cat <<EOF >> /hana/shared/RH1/global/hdb/custom/config/global.ini
   
   [ha_dr_provider_SAPHanaSR]
   provider = SAPHanaSR
   path = /usr/share/SAPHanaSR-ScaleOut
   execution_order = 1
   
   [trace]
   ha_dr_saphanasr = info
   EOF

   Copy to Clipboard Toggle word wrap

3. 各クラスターノードで、sudo visudo /etc/sudoers.d/20-saphana を実行して /etc/sudoers.d/20-saphanaファイルを作成し、以下の内容を追加して、srConnectionChanged() フックが呼び出されたときにフックスクリプトがノード属性を更新できるようにします。

   rh1adm ALL=(ALL) NOPASSWD: /usr/sbin/crm_attribute -n hana_rh1_glob_srHook -v * -t crm_config -s SAPHanaSR
   
   rh1adm ALL=(ALL) NOPASSWD: /usr/sbin/crm_attribute -n hana_rh1_gsh -v * -l reboot -t crm_config -s SAPHanaSR Defaults:rh1adm !requiretty

   Copy to Clipboard Toggle word wrap

   デフォルト設定が必要な理由に関する詳細は、The srHook attribute is set to SFAIL in a Pacemaker cluster managing SAP HANA system replication, even though replication is in a healthy state を参照してください。

4. インテグレーションが成功したら、SAP HANA データベースを起動します。

   # Execute the following commands on one HANA node in every datacenter
   [root]# su - rh1adm
   [rh1adm]% sapcontrol -nr 10 -function StartSystem

   Copy to Clipboard Toggle word wrap

5. フックスクリプトが期待どおりに動作していることを確認します。HANA インスタンスの停止など、フックをトリガーするアクションを実行します。次に、以下のメソッドを使用して、フックがログに何か記録したか確認します。

   [rh1adm@dc1hana01]% cdtrace
   [rh1adm@dc1hana01]% awk '/ha_dr_SAPHanaSR.*crm_attribute/ \
   { printf "%s %s %s %s\n",$2,$3,$5,$16 }' nameserver_* 2018-05-04
   12:34:04.476445 ha_dr_SAPHanaSR SFAIL
   2018-05-04 12:53:06.316973 ha_dr_SAPHanaSR SOK

   Copy to Clipboard Toggle word wrap

   SAP HANA フックが機能していることを確認する方法は、M_HA_DR_PROVIDERS の監視 を参照してください。

1. 制約を作成します。

   [root@dc1hana01]# pcs constraint order start rsc_SAPHanaTopology_RH1_HDB10-clone then start rsc_SAPHana_RH1_HDB10-clone

   Copy to Clipboard Toggle word wrap

2. IPaddr2 リソースをプロモートした SAPHana リソースと同じ場所に配置します。

   [root@dc1hana01]# pcs constraint colocation add rsc_ip_SAPHana_RH1_HDB10 with promoted rsc_SAPHana_RH1_HDB10-clone

   Copy to Clipboard Toggle word wrap

3. クラスター環境でアクティブなロールを使用するために、majoritymaker を回避します。

   [root@dc1hana01]# pcs constraint location add topology-avoids-majoritymaker rsc_SAPHanaTopology_RH1_HDB10-clone majoritymaker -INFINITY resource-discovery=never
   
   [root@dc1hana01]# pcs constraint location add hana-avoids-majoritymaker rsc_SAPHana_RH1_HDB10-clone majoritymaker -INFINITY resource-discovery=never

   Copy to Clipboard Toggle word wrap

4. maintenance-mode を無効にします。

   maintenance-mode を false に設定した後、maintenance-mode を使用してリソースを起動します。すべての設定が完了する前に pacemaker の動作を回避するために、上記の例では --disabled を使用しています。デフォルトでは、リソースは作成されるとすぐに起動されます。--disabled の場合、次のコマンドを使用してリソースを起動できます。

   [root@dc1hana01]# pcs resource enable <resource-name>

   Copy to Clipboard Toggle word wrap

   maintenance-mode を終了するには、以下を使用してください。

   [root@dc1hana01]# pcs property set maintenance-mode=false

   Copy to Clipboard Toggle word wrap

5. 次の 3 つのコマンドを実行して、クラスター環境が正しく動作していることを確認します。

   • pcs status は、すべてのリソースの概要と、それらが正しく機能しているかを示します。
   • pcs status --full は、クラスター環境のすべてのリソースの概要と追加の属性情報を提供します。

   • SAPHanaSR-showAttr --sid=RH1 は、属性情報に基づいた読みやすい概要を提供します。

     maintenance-mode を無効にしてから数分後に正しいステータスが表示されます。

     [root@dc1hana01]# pcs status
     Cluster name: hanascaleoutsr Stack: corosync
     Current DC: dc2hana01 (version 1.1.18-11.el7_5.4-2b07d5c5a9) - partition with quorum
     Last updated: Tue Mar 26 14:26:38 2019
     Last change: Tue Mar 26 14:25:47 2019 by root via crm_attribute on dc1hana01
     9 nodes configured
     20 resources configured
     Online: [ dc1hana01 dc1hana02 dc1hana03 dc1hana04 dc2hana01 dc2hana02 dc2hana03 dc2hana04 majoritymaker ]
     Full list of resources:
     
     fencing (stonith:fence_rhevm): Started dc1hana01
     Clone Set: rsc_SAPHanaTopology_RH1_HDB10-clone
     [rsc_SAPHanaTopology_RH1_HDB10]
     Started: [ dc1hana01 dc1hana02 dc1hana03 dc1hana04 dc2hana01 dc2hana02 dc2hana03 dc2hana04 ]
     Stopped: [ majoritymaker ] Clone Set: msl_rsc_SAPHana_RH1_HDB10 [rsc_SAPHana_RH1_HDB10] (promotable):
     Promoted: [ dc1hana01 ]
     Unpromoted: [ dc1hana02 dc1hana03 dc1hana04 dc2hana01 dc2hana02 dc2hana03 dc2hana04 ]
     Stopped: [ majoritymaker ]
     rsc_ip_SAPHana_RH1_HDB10	(ocf::heartbeat:IPaddr2): Started dc1hana01
     Daemon Status:
       corosync: active/enabled
       pacemaker: active/enabled
       pcsd: active/enabled
     
     
     [root@dc1hana01]# SAPHanaSR-showAttr --sid=RH1
     Global prim srHook sync_state
     ------------------------------
     global DC1 SOK SOK
     Sit lpt lss mns srr
     ---------------------------------
     DC1 1553607125 4 dc1hana01 P
     DC2 30 4 dc2hana01 S
     
     H clone_state roles score site
     --------------------------------------------------------
     1 PROMOTED promoted1 promoted:worker promoted 150 DC1
     2 DEMOTED promoted2:slave:worker:slave 110 DC1
     3 DEMOTED slave:slave:worker:slave -10000 DC1
     4 DEMOTED promoted3:slave:standby:standby 115 DC1
     5 DEMOTED promoted2 promoted:worker promoted 100 DC2
     6 DEMOTED promoted3:slave:worker:slave 80 DC2
     7 DEMOTED slave:slave:worker:slave -12200 DC2
     8 DEMOTED promoted1:slave:standby:standby 80 DC2
     9 :shtdown:shtdown:shtdown

     Copy to Clipboard Toggle word wrap