この記事では、クラスタ化された非SmartStore対応インデクサのディスク領域が不足しているシナリオについて説明します。ここで提供されるソリューションは、迅速な対応を可能にするシンプルなオプションであり、すべての環境に適用できるとは限りません。
これらの一部は、非クラスタ環境にも適用できます。
これらの手順は、SmartStoreが有効な環境には適用されません。
識別方法:
maxVolumeDataSizeMBが設定されていますが、一部またはすべてのインデックスがボリューム管理されていないため、ボリュームを使用していないすべてのインデックス(homePath = $SPLUNK_DB/xxxなど)のディスク使用量は制限されませんWARN ProcessTracker - (child_130__RollFixMetadata) IndexConfig - idx=index_name Path coldPath='/opt/path_to/index_name/colddb' (realpath '/opt/coldstore/index_name/colddb') is inside volume=cold (path='/opt/coldstore', realpath='/opt/coldstore'), but does not reference that volume. Space used by coldPath will *not* be volume-mananged. Please check indexes.conf for configuration errors.
修正方法:
インデクサがすべてのインデックスの実際の使用量を正しく計算し、必要に応じて不要なインデックスのクラスタ全体への複製を排除することで、ディスク領域を解放します。
次の手順では、Cluster Managerのindexes.confにmanager-appsディレクトリ内の適切な場所(インデクサのアプリケーションが保存されている場所によってはmaster-apps)にある適切な設定変更を適用し、インデクサの対応するpeer-appsフォルダに同じ変更を手動で(またはPuppetやAnsibleなどの自動化によって)行うことを提案しています。
注:ほとんどの管理者は設定を$SPLUNK_HOME/etc/system/localに配置することに慣れています。ただし、クラスタ化されたインデクサの場合、$SPLUNK_HOME/etc/system/localの設定は、インデクサのピアアプリケーションディレクトリにある値で上書きされます。
index=_internal sourcetype=splunkd "does not reference that volume" | stats values(idx)
/opt/splunk/bin/splunk enable maintenance-mode
$SPLUNK_HOME/etc/manager-apps/_cluster/local/indexes.conf内、またはカスタムアプリケーションを介して配備される)に対して、次の更新が行われたことを確認します
[volume:hotwarm]
path = /mnt/fast_disk
maxVolumeDataSizeMB = 100000[volume:cold]
path = /mnt/big_disk
maxVolumeDataSizeMB = 150000
[default]スタンザでhomePathおよびcoldPathを設定し、設定をすべてのインデックスに適用することがベストプラクティスです。[default]
homePath = volume:hotwarm/$_index_name/db
coldPath = volume:cold/$_index_name/colddb
上記の検索で特定された各インデックスのスタンザを確認し、それらのスタンザ内のhomePathまたはcoldPath値(存在する場合)をすべて削除します。これにより、[default]に指定した値がこれらのスタンザに適用されるようになります。後で、現在の問題が解決され、これらの特定のスタンザのボリュームにデータが正しく保存されていることを確認したら、homePathとcoldPathが他のインデックスに対して定義されていないことを確認できます。
[_internal)
repFactor = 0
各インデクサで一度に1つずつ(コマンドラインを使用)
/opt/splunk/bin/splunk stop systemctl stop Splunkd.service$SPLUNK_HOME/etc/peer-appsディレクトリにある適切なアプリケーションで、上記の手順でクラスタマネージャに適用したものと同じ編集をindexes.confに行います。/opt/splunk/bin/splunk startsystemctl start Splunkd.service/opt/splunk/bin/splunk disable maintenance-mode

トラブルシューティングに役立つ可能性があるLinuxコマンド:
ディスク使用量の表示:
du --max-depth=2 -hc /opt/splunk/var/lib/splunk
datamodel_summaryフォルダーのディスク使用量で並べ替え:
du --max-depth=2 -h|grep /opt/splunk/var/lib/splunk --color datamodel_summary|sortSplunkのドキュメント:
| 改定 | 発行日 | コメント |
|---|---|---|
1.0 |
28-Sep-2026
|
初版 |