本文描述集群且未启用SmartStore的索引器磁盘空间不足的情况。此处提供的解决方案只是一些简单的选项,可以提供一些即时缓解,但可能不适用于所有环境。
其中一些也可用于非群集环境。
这些步骤不适用于支持SmartStore的环境。
如何确定:
maxVolumeDataSizeMB已配置,但由于某些或全部索引不是卷管理的,因此它不会限制未使用卷的所有索引的磁盘使用率(例如homePath = $SPLUNK_DB/xxx)WARN ProcessTracker - (child_130__RollFixMetadata) IndexConfig - idx=index_name Path coldPath='/opt/path_to/index_name/colddb' (realpath '/opt/coldstore/index_name/colddb') is inside volume=cold (path='/opt/coldstore', realpath='/opt/coldstore'), but does not reference that volume. Space used by coldPath will *not* be volume-mananged. Please check indexes.conf for configuration errors.
如何修复:
通过允许索引器正确计算所有索引的实际使用量,从而释放磁盘空间,并且,如果需要,可以消除整个群集中非必要索引的复制。
以下步骤建议在manager-apps目录(或master-apps)中的适当位置对集群管理器上的indexes.conf应用适当的配置更改,然后手动进行相同的更改(或通过自动化(例如Puppet或Ansible)部署到索引器对应的peer-apps文件夹。
NOTE:大多数管理员习惯将配置放入$SPLUNK_HOME/etc/system/local。但是,对于集群索引器,$SPLUNK_HOME/etc/system/local中的设置将被索引器的peer-apps目录中找到的任何内容覆盖。
index=_internal sourcetype=splunkd "does not reference that volume" | stats values(idx)
/opt/splunk/bin/splunk enable maintenance-mode
用部署的)进行了以下更新
[volume:hotwarm]
path = /mnt/fast_disk
maxVolumeDataSizeMB = 100000[volume:cold]
path = /mnt/big_disk
maxVolumeDataSizeMB = 150000
[default]模式中设置homePath和coldPath,以将配置应用到所有索引:[default]
homePath = volume:hotwarm/$_index_name/db
coldPath = volume:cold/$_index_name/colddb
检查通过上述搜索确定的每个索引的准则,并删除这些准则中的任何homePath或coldPath值(如果存在)。这将允许放置在[default]中的值应用于这些标准。稍后,解决当前问题并确认数据已正确保存到这些特定标准的卷后,您可能希望确保没有为任何其他索引定义homePath和coldPath。
[_internal)
repFactor = 0
在每个索引器上逐个显示一个(通过命令行)
/opt/splunk/bin/splunk stop systemctl stop Splunkd.service$SPLUNK_HOME/etc/peer-apps目录中的相应应用中,对indexes.conf进行与上述步骤中应用于集群管理器的相同的编辑。/opt/splunk/bin/splunk startsystemctl start Splunkd.service/opt/splunk/bin/splunk disable maintenance-mode

在故障排除中可能有用的Linux命令:
显示磁盘使用情况:
du --max-depth=2 -hc /opt/splunk/var/lib/splunk
按datamodel_summary文件夹的磁盘使用率排序:
du --max-depth=2 -h|grep /opt/splunk/var/lib/splunk --color datamodel_summary|sortSplunk文档:
| 版本 | 发布日期 | 备注 |
|---|---|---|
1.0 |
28-Sep-2026
|
初始版本 |