目次
はじめに
Verticaの起動時に“VX001/2973: Data consistency problems found; startup aborted”が発生し、起動に失敗する場合があります。本記事では、同エラーが発生した場合のトラブルシューティングをご紹介します。“VX001/2973: Data consistency problems found; startup aborted”の発生例：
$ admintools -t start_db -d test
Info: no password specified, using none
Starting nodes:
v_test_node0001 (XXX.XXX.XX.XX)
Starting Vertica on all nodes. Please wait, databases with a large catal og may take a while to initialize.
Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN)
Found these errors in startup. logs on hosts:
host [‘XXX.XXX.XX.XX’] report: @v_test_node0001 VX001/2973: Data consistency problems found; startup aborted
HINT: Check that all file systems are properly mounted. Also, the –force option can be used to delete corrupted data and recover from the cluster LOCATION: mainEntryPoint, /data/vertica.cpp:1752
Press RETURN to continue
Database Vertica did not start successfully: Something Failed
Info: no password specified, using none
Starting nodes:
v_test_node0001 (XXX.XXX.XX.XX)
Starting Vertica on all nodes. Please wait, databases with a large catal og may take a while to initialize.
Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN) Node Status: v_test_node0001 (DOWN)
Found these errors in startup. logs on hosts:
host [‘XXX.XXX.XX.XX’] report: @v_test_node0001 VX001/2973: Data consistency problems found; startup aborted
HINT: Check that all file systems are properly mounted. Also, the –force option can be used to delete corrupted data and recover from the cluster LOCATION: mainEntryPoint, /data/vertica.cpp:1752
Press RETURN to continue
Database Vertica did not start successfully: Something Failed
原因
本事象はVerticaが不正に停止しデータが不整合な状態となった場合に発生します。お客様からは、Verticaを停止しない状態でOSを停止した場合に、本事象のお問い合わせをいただくことがあります。OSを停止する場合は、事前に「admintools」や「Management Console」を使用して、正しい手順でVerticaを停止してください。
対処方法
admintoolsコマンドに「-F」オプションを指定して起動してください。「-F」を指定することで、破損していたデータが削除され正常に起動できるようになります。
１．vertica -D プロセスの確認
vertica -D プロセスが存在しないことを確認します。※存在する場合は下記のような出力になります。
|
1 2 3 |
$ ps -ef | grep -i "vertica -D" | grep -v grep dbadmin 371073 1 1 10:36 ? 00:03:45 /opt/vconsole/vendor/OpenJDK/Zulu/java/1.8u212/jre//bin/java -Djava.net.preferIPv4Stack=true -Djava.net.preferIPv4Addresses=true -Duser.language=en -Dvertica.home=/opt/vertica -Dvconsole.home=/opt/vconsole -Djava.library.path=/opt/vconsole/lib -Dderby.system.home=/opt/vconsole/mcdb/derby -Dorg.eclipse.jetty.annotations.LEVEL=OFF -Xmx2g -Xms1g -jar /opt/vconsole/lib/webui.war dbadmin 406666 1 0 12:32 ? 00:00:35 /opt/vertica/bin/vertica -D/home/dbadmin/test/v_test_node0001_catalog -C test -n v_test_node0001 -h 10.0.0.24 -p 5433 -P 4803 -Y ipv4 |
vertica -D プロセスが存在している場合はkillを実行します。
|
1 |
$ kill -9 406666 |
vertica -D プロセスが kill され、存在しないことを確認します。
|
1 |
$ ps -ef | grep -i "vertica -D" | grep -v grep |
２．admintoolsコマンドに「-F」オプションを指定して起動
「-F」オプションを指定し、Verticaを起動します。|
1 |
$ admintools -t start_db -d DB名 -F |
「-F」を付けてVerticaの起動を試行した場合は、下記の3パターンの動作になります。
①Vertica起動が正常に完了する
Vertica起動が正常に完了する場合、下記の ★ のような出力を確認できます。起動後に必要な復旧作業等はありません。
|
1 2 3 4 5 6 7 8 9 10 11 |
$ admintools -t start_db -d DB名 -F Info: no password specified, using none Starting nodes: v_test_node0001 (XXX.XXX.XX.XX) Starting Vertica on all nodes. Please wait, databases with a large catalog may take a while to initialize. Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (DOWN) Node Status: v_test_node0001: (INITIALIZING) Node Status: v_test_node0001: (UP) Database test: Startup Succeeded. All Nodes are UP ★ |
②Vertica起動が失敗して、「Startup Failed, ASR Required Press RETURN to continue」が出力される
“Startup Failed, ASR Required Press RETURN to continue”が出力され、起動に失敗する場合、下記の弊社Vertica技術情報サイトに記載の手順をお試しください。・Vertica起動が”Startup Failed, ASR Required”で失敗した場合の対処方法
